《俄罗斯数学教材选译》序 


从上世纪50年代初起，在当时全面学习苏联的大背景下，国内的高等学校大量 
采用了翻译过来的苏联数学教材.这些教材体系严密，论证严谨，有效地帮助了青年 
学子打好扎实的数学基础，培养了一大批优秀的数学人才.到了 60年代，国内开始 
编纂出版的大学数学教材逐步代替了原先采用的苏联教材，但还在很大程度上保留 
着苏联教材的影响，同时， 一 些苏联教材仍被广大教师和学生作为主要参考书或课外 
读物继续发挥着作用.客观地说,从解放初一直到文化大革命前夕，苏联数学教材在 
培养我国高级专门人才中发挥了重要的作用，起了不可忽略的影响，是功不可没的. 

改革开放以来，通过接触并引进在体系及风格上各有特色的欧美数学教材，大 
家眼界为之 一新, 并得到了很大的启发和教益.但在很长一段时间中，尽管苏联的数 
学教学也在进行积极的探索与改革，引进却基本中断，更没有及时地进行跟踪，能看 
懂俄文数学教材原著的人也越来越少，事实上已造成了很大的隔膜，不能不说是一 
个很大的缺憾. 

事情终于出现了一个转折的契机.今年初，在由中国数学会、中国工业与应用数 
学学会及国家自然科学基金委员会数学天元基金联合组织的迎春茶话会上，有数学 
家提出，莫斯科大学为庆祝成立250周年计划推出一批优秀教材，建议将其中的一 
些数学教材组织翻译出版.这一建议在会上得到广泛支持，并得到高等教育出版社 
的高度重视.会后高等教育出版社和数学天元基金一起邀请熟悉俄罗斯数学教材情 
况的专家座谈讨论，大家一致 认为： 在当前着力引进俄罗斯的数学教材，有助于扩大 
视野，开拓思路，对提高数学教学质量、促进数学教材改革均十分必要.《俄罗斯数 
学教材选译》系列正是在这样的情况下，经数学天元基金资助，由高等教育出版社组 
织出版的. 
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《俄罗斯数学教材选译》序 


经过认真选题并精心翻译校订，本系列中所列入的教材，以莫斯科大学的教材为 
主，也包括俄罗斯其他一些著名大学的教材.有大学基础课程的教材,也有适合大学 
高年级学生及研究生使用的教学用书.有些教材虽曾翻译出版,但经多次修订重版， 
面目已有较大变化,至今仍广泛采用、深受欢迎，反射出俄罗斯在出版经典教材方面 
所作的不懈努力，对我们也是一个有益的借鉴.这一教材系列的出版，将中俄数学教 
学之间中断多年的链条重新连接起来，对推动我国数学课程设置和教学内容的改革， 
对提高数学素养、培养更多优秀的数学人才,可望发挥积极的作用，并起着深远的影 
响，无疑值得庆贺，特为之序. 


李大潜 
2005年10月 























































































序 


专门出版这本“概率论习题集”的想法是这样产生的， 

在我们的书《概率》的前两版（1980, 1989) 中，全书八章的每一章中都配备有大 
量的各种类型的 习题. 在准备出版第三版时，由于改写和增补的部分较多，将书分为 
了两卷，于2004年4月份出版.也正是在此过程中产生了单独出版一本习题集，以 
把原书中的“老习题”，以及由于各种原因未能收人原书中的“新习题”都包括进去 
的想法.（未能收人原书的一个基本原因是受到在书籍出版时关于篇幅限制的约束 .) 

习题的收集和剔除是我在多年之中根据自己的兴趣进行的，习题的来源多种多 
样，各种教科书、讲义、习题集、专著、刊物上面发表的论文， 

产生于我们为本科生和研究生举办的专门的讨论班. 

很难逐一列出所有习题的确切来源.但是其中不少可以从本书最后所附的参考 
文献中反映出来. 

绝大多数习题后面都给出了提示,这样做的原因 如下： 

我们的《概率》书诞生在国立莫斯科大学数学力学系，是在我们的讲座的基础 
上形成的，那里的本科生在第四学期末选择专业.那些在三年级时以我为导师的学 
生会被告知：你们（在三年级）的第一项工作由两部分组成,其中的第一部分就是解 
答《概率》书中的习题，例如第二卷第八至十章中的习题.那么毫无疑问，学生们为 
了解答这些习题,不仅需要独立熟悉相应章节的内容，而且在必要时,还要熟悉以前 
学过的有关章节.在收到他们的解答（不是手写的，而是用 Tex 打出来的）之后，通 
过批阅和讨论这些解答,学生们获得了他们的第二部分工作,这里面就已经有着更多 
的创造性了. 

这样多年坚持的结果，使我们积累起数量可观的对各种题目（收录在《概率》的 




. 还有一些题目 
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各个版本中的题目）的解答，其中的多数解答曾按照我的要求反复进行过验证、校勘， 
并且幸运地被我们教研室中的一些合作者、研究生和助教们系统地重新做解，他们 
之中有（按照解答的章节顺序排列)： A . C . MepHoro (第一至五章)， M . A . YpycoB, 
M . A . ilpomeHKOB 和 K ). A . Ky3HeuoB (第六至八章).我谨在此对他们的工作致以 

深切的谢意. 

收集完所有习题解答之后，我立即意识到不可能立即出版它们，因为它们所占 
的篇幅实在太大.我不得不将习题解答改写为提示，正如现在的这种形式,此前我还 
为数目众多的新题目写了提示. 

应当特别说一说放在本书末尾的附录.通过附录，我们可以较早地把一些概念 
介绍给读者，尽管只能是初浅的介绍，这样做的理由如下. 一 方面，附录中对本书以 
及《概率》第一、二卷中的一些基本符号、基础性概念给出了简介性、评述性的提 
示; 另一方面,附录中收人了一些解题时需要用到的组合论、马尔可夫链的位势理论 
方面的补充材料，其中有些概念是我们书的正文中所没有出现过的. 

现在的这本习题集是与我们的《概率》第一、二卷紧密联系的.例如，在本书第 
二章第3节第11题的文字中 写道：‘试 验证表2和表3中所列人的 £ 分布’都是真 
正的概率分布”.应当明白，这里所说的表2和表3是指《概率》第一卷第二章第3 
节中的表2和表3 ( pl 62-163), 又如，第四章第3节中的题目 5( c ): “证明，（恰姆别尔 

诺伊命题中的）数 

常的’（按十进制表示,参阅例 2)”. 这里所说的例2是在《概率》第二卷第四章第3 
节中 ( pl 9). 

读者们将会发现，收集在本书中的习题有着多种不同的性质. 

( A ) —些题目和练习是用来检查对《概率》第一、二卷中所介绍过的概念、事实 
和结论的掌握情况的（例如：第一章第1，2节关于有利场合下的样本点个数的组合计 
数，以及为此目的而展开的各种概念,诸如非完全阶乘 ( iV ) n , 组合数和 

卡塔兰数—阶和二阶斯特林数硌和碩，贝尔数尻，斐波拉契数匙，等等). 

( B ) 另外一些（中等难度和高等难度的）习题则要求具有较大的创造性（例 如: 
证明将关于强收敛的勒贝格定理和关于条件数学期望中的极限性状的莱维定理联系 
起来的结果，见第七章第4节第3题). 

( C ) 为了陈述许多题目，需要补充《概率》第一、二卷正文中所没有出现的一些 
资料,介绍读者认识一些已经熟知的或者关于其存在性已经有所证实的事实（例如， 
第二章第2节第27题介绍了苏斯林的如下 结论: 平面博雷尔集在一个坐标轴上的 
投影可以不是直线上的博雷 尔集； 还介绍了对集合进行怎样的运算，可以得到由某 
个集合类所生成的最小代数和^代数中的所有集合，参阅第二章第2节第25, 26和 

32题). 


其中依次所写出的所有的数都是‘正 


w = 0.123456789101112 




(我们完全清楚，这种类型的题目事实上就是具有难度的定理，然而，把它们写 
成习题的形式可以引导读者去思索，例如，在非初等的概率论中，考虑如何可以实际 
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地构造出在概率模型的描述中起着关键作用的完整的〜代数来 .） 

(D) 许多题目与随机游动朝向布朗运动和布朗桥收敛的极限过程有关(例如第 
三章第4节的习题)，这些关于“不变原理”的习题是认识连续时间随机过程，特别 
地，是认识泛函极限定理中的问题的前奏. 

再谈一些其他方面的问题. 

多年以来，莫斯科大学的教师们曾出版过若干本概率论习题集，它们不仅常年 
被使用在莫斯科大学的教学过程中，而且还被许多其他高等院校采用.它 们是： 

1963年， MeniaJiKHHJl.iL 概率论习题集，莫斯科大学出版社； 

1980年， CeBacTbHHOB B. A., Hhcthkob B. IL，3y6KOB A. M. 概率论习题集， 

莫 斯科: 科学出 版社； 

1986年， IIpoxopoB A. B., YmaKOB B. F., YniaKOB H. T . 概率论习题集（基本 

概念.极限定理.随机过程)，莫 斯科: 科学出版社； 

1989年， 3y6KOB A. M.，CeBacTbHHOB B. A., Hhcthkob B. II. 概率论习题 

集,第二版，莫 斯科: 科学出 版社； 

1990年， Ko3jiob M. B. 初等概率论中的例题与习题，莫斯科大学出版社. 
自从上述习题集中的最后一本出版以来，已经十五年过去了.在这段时间中，概 
率论教科书的结构已经发生了很大的变化.出现了许多新的方向、新的分支和新的 
题目.非常希望我们这本于2006年出版的习题集，能够与上列诸本习题集一道，不 
仅能够充分反映出概率论的现状,而且能够充分反映出它的传统和经典的部分. 

在结束序言之时，我们指出，本书共约收录了一般难度的习题1500道（包括子 


题在内). 


正如在出版《概率》第一、二卷时那样，在本书的出版准备工作中，托洛佐娃 


(T. B. ToJioaoBa) 一 如既往地做了大量的校对、录入文字和学术编辑工作，谨在此 
向她致以诚挚的谢意. 


A. 施利亚耶夫 
莫斯科大学概率论教研室 
俄罗斯科学院数学研究所 

莫斯科， 2004 年 
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第一章初等概率论 


§ i . 有限种结局试验的概率模型 

1. 考察对于集合 n 的子集进行的博雷尔交 （ n) 并 （ u) 运算，验证它们具有下述性 


质: 


AVJ B = B VJ (交换律)， 

avj{b\jC)^{A\jb)\jC, a n( s nC) = (a n b) n c ( 结合律)， 

A 门 （ Bu (7) = (An 丑） u ( AnCO , Au ( Br \ C ) = ( AuB ) n ( AuC ) (分配律）， 

A D A = A (幕等性) • 

并且证明，对于交并运算的取余运算，还有如下的德摩根法则 成立： 

Au B ~ AC \ B , A C ) B = Au B 


AUA = A 


(其中 Z 表示集合 a 的补集，即 n\A). 

2. (不完全阶乘 ( AT ) n 的性质与各种解释，其中 (N 、 n 三 N(N — 1) … （AT — n + 1) 是 

自 iV 个元素中取出 n 个来的排列数,具体介绍参阅附录第1节 .） 证明， 

( a ) 由共有 | A | = iV 个元素的集合 A 中取出的大小为 n 的有序样本无 
重复元素，即“无放回抽样”）的数目等于 (7V) n) 

( b ) 从由 iV 个不同字母构成的字母表中取出不同字母所形成的长度为 n 的 
单词的数目为 （ AT)n ， l^n^N, 

(c) 定义在集合 X (|X| = n) 上，取值于集合 y (|F| 并且满 

足性质“如果 A / x 2 , 则 f( Xl ) ^ f(x 2 )，， 的不同函数 y = f(x)(BP f : X 
单射）的数目等于 （ W ) 


Y 


n* 
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的性质与各种 解释， 具体介绍参阅附录第1节 .） 证明， 

( a ) 由共有01 = iV 个元素的集合 A 中取出的大小为 n 的无序样本 [… • 1( 无 
重复元素，即“无放回抽样”）的数目等于1彡 n 彡见 

( b ) 由 n 个1和 iV - n 个0所组成的有序数组 (...) 的数目等于 C &， 


NI 


\(N-n)l 


71 ^ N . 


( c ) n 个不可区分的小球放入 iV 个不同的盒子，每个盒子至多放1个小球 
(“有限制的放球”）的放法数目等于 CL l ^ n ^ N . 

( d ) 2维非负格点集合 Z } = {( ij )'. A j = 0,1，2,… } 上的以原点（0,0)为 
起点，以 ( n，N — n ) 为终点的非降路径(所谓非降路径，就是每一步都只能向上 
或者向右移动一个单位的路径）的条数等于 C &， C° N - 1. 

( e ) 元素个数 | A | = iV 的集合4的由 n 个元素构成的不同的子集 D (| D | = 
^ N ) 的数目等于 

提示： 如果首先直接证明其中的一个命题，例如先证命题⑷成立，那么 
其余命题就可以利用已经证得的结果来证明，例如可采用证明 途径： （ a )#( b )， 

…，参阅第1节例 6. 

4. 如同上题中的 （ d )， 我们考察2维非负格点集合於+ = {( ij )： 0,1, 2,---} 

上的以原点（0,0)为起点，以 ( n , n ) 为终点的位于“对角线”下方，且至多与之 
相切的路径（即仅经过集合 {( ij ) eZl ： 中的点的路径). 

证明，这样的路径的条数等于 C n+1 , 其中 


n 


C n = —C 


, n > 1， 


2(n_l) 


n 


称为卡塔兰 （ Catalan ) 数，见 [45]. (有时也将卡塔兰数理解为 c n = C 

例如，参阅 [61].) 

试验证 C u ...， C 9 的值分别为 1,1,2,5,14,42,132,429, 1430. 

5. 对卡塔兰数 C n ， d , 有许多有趣的组合解释.例如，对于 n 个数 a ， b ， c ， d , … 
的求和,如果每次只将两个数相加 ef 旦不允许改变加数的顺序),我们来考察不同 
的求和方式的数目 iV n . 比如说，当 n = 3时，如果按照每次只将两个数相加的规 
贝！ I ，和 a + 6 + c 可以有如下各种不同的“加括号”方式 ： a + 6 + c = fa + (6 + c 

((a + 6) + c) 

的“加括号”方式 （ iV 4 = 5): 


n ^ 1, 


n+1 ， 


，此处不同的求和方式数目 iv 3 = 2. 对于 


4,我们有5种不同 


n = 


((a + 6) + (c + d)) = ((( a + 6) + c) + d) 

二 ((a + (fe + c )) + d ) = (a + ((6 + c ) + d )) = (a + (fe + (c + d ))) ■ 

( a ) 证明，对任何 n > 3,不同的求和方式数目 iV n 都等于 C n . 

( b ) 我们来观察正 n 边形 （n > 4) 的用其对角线所作的三角形剖分,即用不 
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在形内相交的对角线将其分为一系列三角形（显然，自每个顶点所引出的对角 
线条数等于 n - 3). 证明，这样的剖分数目凡等于 

( c ) 证明，卡塔兰数 C n , n > 1,满足递推关系式 


= J2 C i C n-i 


W 


i=l 


其中= 0 , c 卜 1. 

⑷证明，由递推式 （*) 所定义的序列 ( O n >1 的母函数 F *( x ) - E 


n^l 


满足方程 


(，⑷) 2 . 


F^^x) — X - 


( e ) 证明（注意 F *(0)=0), 


F*(x) = 臺 (1 - (1 - 句 1 , 2 ) 

并由此算出 W 的）系数 Q ， 正如我们所期望的，它重合于卡塔兰数 C n: 


X < 


4 


= -^ v 2 (-4 r = - c 2 ^ 1} 

( q ) 2 的定义可参阅本章第2节第 22 题 .） 

6. (二项系数 C ^ +以 的性质与各种解释 .） 证明， 

( a ) 由共有⑷二 iV 个元素的集合 A 中取出的大小为 n 的无序样本 [• •.] (有 
重复元素，即“有放回抽样”）的数目等于 

( b ) 由满足关系式 m + .-- + n N = n 的非负整数叫 ， i = 1，…， iV ， 构成的 
有序数组的数目等于 

( c ) n 个不可区分的小球放入 JV 个不同的盒子（每个盒子放入的球数不限， 
即“无限制的放球”）的放法数目等于 CJ^ +n _ u n ^ l , N ^ l . 

提示： 参阅第3题的提示. 

7 . (参阅上题 ( b ).) 我们来观察方程 m + * •• + tin ~ n(n ^ 1, AT > 1) 的非负整 

数解的无序数组 [ m ， … , n N }. 这样的数组的个数有多少? 
如果只限于正整数解 (rii >0, z = 1, ••- , iV ), 那么相应的数组的个数有多少？方 
程 m +…+ riAT = n ( n 彡1 ， iV > 1) 的正整数解的有序数组 （ m , …，卽）的个 

数有多少？ 

8. (参阅第6题 ( b ) 和第7题 .） 我们来考察关于非负整数或正整数叫 ， i = 1 ，…， iV 
的不等式 m + . ■ • + nw 彡 n . 试求满足不等式 m +…+ nw 彡 n ( n 彡1， JV 彡 1) 
的有序解组 ( n u ..、 n N ) 和无序解组 [ n x ,...， n N ] 的个数. 


C 


— c n . 


n > 1, N > 1. 


+n— 1 ， 
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9 . 证明， 


( a ) n 条直线可以把平面 R 2 所分成的部分的最大数目为 

n(n + l ) 


( b ) n (n ^ 3 ) 个平面可以把空间 M 3 所分成的部分的最大数目为 

I 

~(n 3 + 5 n + 6 ). 

D 

10 •设 A 与 B 是 Q 的两个子集.证明，由它们，（按照第 3 节的术语）由子集类 

= {A,B}, 所张成的代数 a{A,B) 共由 N( 2 ) = 16 个元素 组成： 

{在丑， 


A, B, A OB, AnB, A\B, B\A, 

AU B, AUB，AUB, AUB 7 AAB, AAB, O , 0 }, 


其中 AAB =(A\B)U(B\A) 为集合 4 与 B 的对称差（参阅第二章第 1 节中 
的表格). 


试给出 Q 的分割贫(参阅第 3 节)，使得由它所张成的代数 a (的与 a(A,B) 


相同. 


证明，由子集类 4 = {木，…， A n }, 其中 4 g Q , i = I , - - , n , 所张成的 
代数 a{A lr -- ，八 0 由 N(n) = 2 2 "个元素组成，因而 N( 2 ) - 16 , iV ( 3 ) = 256 5 

等等. 

11 . 证明布尔 ( Boole ) 不等式： 


Ua 卜 ⑷， p fV 心 1 ㈤ . 


( a ) 


P 


i 二 1 


i=l 


证明 } 对任何 n ^ l , 都成立不等式 




( b ) 


P 


且成立如下的古尼阿斯 ( Kynnac ) 不等式 








P 


彡 min 


k 


ij^k 


和钟开莱-爱尔迪希 ( Chung - Erdos ) 不等式 ® 


2 


E p ⑷ 




(句 


P 






I - - 1 


® 原文中的不等号错为‘％”——译者注. 
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提示： 对于上述不等式 （ b ) 在《 = 3时的情形，即 P(^i n 4 2 n A s ) > 
P (^ i ) + P (^2) + P (^3) - 2, 可以直接通过观察来验证，而对于其余情形,则需 
采用归纳法. 

12. 证明如下的关于事件 (n > 1) 的并与交的概率容斥公式③（称为庞加 

莱 （ Poincar 6) 公式，庞加莱定理，庞加莱租等式)： 

( a ) P ( A ! U --* UAn )= P ( A h )~ P (^ unA ia ) + 




* ♦聲 




l < U « a<n 


+(— i ) m+1 [ 门… 门為 J + … + (- i ) n +1 P(Ai n … n 人) 




和 


( b ) E 从 3 ) + 〜+ 






E p (^ 


U A% m ) + … + (— l ) n + 1 P (^ 4 i U … U A n ). 


m+l 


+(- l ) 


u 


• # « 


1 彡 


注 1. 公式 （ a ) 和 （ b ) 可以缩写为下述 形式: 


= E(n p [ fl Ai = ^ ( " ir+i5m 

m^=l \i—l / m=l 


p 


其中 


E p (矣 n . 


E 


• * n Ai m )^ S m = 


P(Ah U -- Ui 4 i m )- 


Sm ^ 




l < ti << i m ^n 


注 2. 虽然介绍容斥公式是《概率》（第一卷）第一章中的内容，在那里仅 
仅涉及了有限的概率空间 （ a 〆 ， p )， 我们需要强调的是，这个公式对于一般的 
概率空间 （ a 多， p ) 也是适用的（参阅第二章) • 

注 3. 我们用 | A | 表示有限集合 n 的子集 A 中的元素个数.那么在 P ( A ) = 
|涮/问(古典概型）的场合下,可以由公式⑷和 （ b ) 推出关于有限集合丸…， 
A n 的容斥公式. • 


| u + e 




ieT 


0#5CT 


ies 


rH = e (- i ) i 5 i + i | u a ^ 


(bO 


0^SCT 


<€S 


ieT 


其中 I 1 = {!■，•••，》}• 


© 也称为进出公式 —— 译者注 . 
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提示: 公式 （ a ) 可以运用归纳法来证明，首先应当证明 n = 2时的公式 

P(^xUA 2 ) = [P(^i) + P(A 2 )\ - P(Ai n A 2 ) 


成立（亦可参阅第4节第9题). 

为了证明公式 （ b )， 需要注意 


n 


n 


n 


C\ Ai 


u 不 

i=l 


u 忑 

1=1 


=p 


=1 —p 


p 


然后对不，…，3„运用公式 （ a ). 

13 .用表示事件 , A n 中恰有 m 个同时发生的事件， 

证明， 


n. 


n 


p (5 m )=5 Z (- i ) 


k 一 m 


crs k 


fc=m 


或者，展开为 


p(B m ) ^s m - ci + 1 s m+1 + … +(_i) 一 cr m s 

再用 B > m 表示事件 A l 5 .-., A n 中至少有 m 个同时发生的事件，试由上面 
的公式推出 


n* 


n 




P(D(= P(B m ) + 


* * * 


或者，等价地写为 


P (馬 m ) =S m - C l m S m+l + … + (~l) n - m C^ZrSn^ 

提示： 关于 P ( B m ) 的公式（称为华林 ( Waring ) 公式）可以运用第 I 2 题中 
的容斥公式给出一^组合证明（在费勒 ( FeUer ) 的书中有一^样的证明（参考 
文献[119]，第1卷第4章第3节 ))• 建议那些已经掌握了随机变量和数学期望 
概念的读者，采用下述证明 方法： 

令足 =即事件戌的示性函数 , i = 1,…， n . 假设对于给定的试验结 
果0；，标号为 i u …， i m 的事件发生，而标号为 h , …， jn - m 的事件没有发生. 

我们来观察和数 


“… X‘(l 

其中的求和对一切可能的选取⑷，…， D 和（^，… Jn - m ) 进行.如果试验结 
果 a ; 恰好属于 m 个事件，…，，那么该和等于 m ; 在其余情形下，该和 
为 0. 而概率 P ( B m ) 就是所求的和的数学期望，接下来的步骤可以参阅第4节 
第9题的提示（也可参阅第二章第6节第31题). 


UHl — U 


§1. 有限神績屑试验的概車植型 


试由第13题中关于 P ( B m ) 和 P (办 m ) 的公式推出下述对一切偶数 r 成立的 

邦费尔罗尼 ( Bonferroni ) 公式： 


14 


r +1 


+ J2(-l) k C^ +k S m+k ^ P(Bm) < + ^2(-l) k C^ +k S m+k , 


k=l 


fc=l 


r +1 




fe=l 


^=1 


提示: 本题的证法之一是首先验证下述（有益的）表达式的正 确性: 


n 


n 


s m = V ； C ^ r / P (馬 m ). 


r—m 


r=rrt 


15. 利用第 12 题中关于和忌 „ 的定义，证明 

( a ) 邦费尔罗尼不等式（上题中不等式的特殊情 形): 


n 


^2k ^ P ( U ^ ) ^ S\ - jS> 2 ~f* 


+ S 2 k -1 


S \ — S2 + 


♦ • ♦ 


* * * 


其中 fc > 1，使得 2 fc 彡 

( b ) 古特别里不 等式: 


n. 


s m 


n 




p 


m = 1 ，… ，n 




m—1 7 


n — 1 


( m = l 时就是第 11 题布尔不等式中的第一个不等式) • 

( c ) 弗雷耿 ( Prechet ) 不等式： 


Sm+l ^ 


n 


1=1 


p 


0 ， 1，… 






n — i . 


m 




°n-l 


c 


m 


n — 1 


16. (无序问题)设知…， i n ) 为正整数1，…， n 的随机排列（各种排列方式的发生 

概率都是 1/ n !). 证明 

( a ) 在1，…， n 的排列中恰有 m 个数位于自己的位置（部分无序）上的概 
率等于 


( 


1 


1 


1 


e 


1_ 1! + 2! ~ 3! + *'* + ( ~ 1)n ~ m 


n — 00 


(n — m)\ 


ml 


m\ 


( b ) 在1，…， n 的排列中至少有 1 个数位于自己的位置上的概率 P ^ i ) 等 


于 


1 


(〜1 一 e 一 


) 


+ , " + ( — 


1 一 — 

2! 3! 


71 00} y 


n\ 
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由此可知,完全无序（即任何一个数都不在自己的位置上）的概率等于 


n 


(― ip - 


p {> i ) = 


(〜 e 一 


cx >). 


n —► 




j ! 


j =0 


提示 :设木 表示集合 {1, …， n } 中的数 i 在排列中确实位于自己的位置上 
的事件.那么非常有趣 的是: 此处的概率 P ( m ) 就等于第13题中的概率 P { B m ), 


亦即 


P(m) = Sm — + 

事实上，只要证 明了灸 = 1/ fc !， 就可得到该公式. 

为了证明关于 P {>1) 的公式，仍然需要利用第13题，即 


+ (― l) n — m d 


• » * 


P {> i) = P(^i)= 氏 — 5 2 + 5 3 —— + (― 1 广一 1 S„, 


(n — fc)! 


其中 5*；= 


n! 


17 - (重合问题） 设有 n 封信和 n 个信封 • 信被随机地装入各个信封，亦即对各种不 

同的装入方式按照“古典概型”賦概（参阅第5节).以表示恰有 m 封信 
被装入自己的信封的概率， 


证明 


t n—m 

丄 F 

ml ^ 


( ip - 


① 


(m)= 


f. * 


i=o 


提示 ：1) 自然首先应当考虑如何理解“信被随机地装入信封”的提法.如果 
将其理解为:1号信可以随意放入 n 个信封中的任何一个, 2号信可以随意放入 
剩下的 n - 1个信封中的任何一个，如此一直下去，那么这样的过程就可以看成 
为一种“无放回抽样”，与信的号码 (1,-** , n ) 相对应的是信封号码的有序数组 
( a l5 ... , a n ), 因此共有 （ n) n = n ! 种不同的放入方式.再根据经典的“等可能性” 
原则（参阅第5节)，得到每一种顺序 ( a ir .. , a n ) 的概率都是 l/nl 

2) 用為表示第 i 号信被放入“自己的”第 i 号信封的事件，那么就有 

P ( m )= P ( B m )( 参阅第13题)，并且 


n 


fc=m 

于是只要证得馬 = l / fc !, 1彡 fc 彡 n , 即可得到所要证明的关于 P ( m ) 的公式，（我 
们指出, P ( 0 ) 表示任何一封信都没有被放入自己信封的概率，其值为 f ： (-1) 

甚至对于固定的 n ( n > 4), 该值都非常接近于 e - 1 .) ② 

译者注. 


k 1 


M ， 


fc =2 


Kl : 字) 


①原书为 P (m> = ^ 
③原书为1 一 e- 1 — 


译者注 • 
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18. 从幼儿园离开的时候， n 个孩子中的每一人都以“随机方式”取了一只左脚靴子 

和一只右脚靴子.证明， 

( a ) 若以 P a 表示他们全都没有穿着自己的一双靴子离开的概率，则有 


n 


(n - k )\ 


Pa = D - 1 ) 


k 


① 


k \ n \ 


k~0 


( b ) 若以朽表示他们全都既没有穿着自己的左脚靴子，又没有穿着自己的 
右脚靴子离开的概率，则有 


2 


n 




k 


k \ 


k~2 


提示：首先应当明确“以随机方式”的含义.（可以按照第17题提示中的方 
式类似地解决). 

( a ) 若以次表示第 i 个孩子取了自己的左脚靴子和自己的右脚靴子的事 
件.则由容斥公式可得 


n 


n 


p a = pm ^ 


u 為 


+ (-l) n 5 


=1 — Si + 灸 一 


= l — p 




ny 


(n—fc)! 


应当指出，此处与题目中关于的表达式相同， 有 Sk = 

( b ) 为了证明关于 n 的表达式,应当明确 

p b = p (每个孩子都没有穿着自己的左脚靴子). 

p (每个孩子都没有穿着自己的右脚靴子) 


jk!n! * 


再利用第17题中的结果. 

19. 我们来考察将 n 个 质点按 麦克斯韦-波尔查诺统计方 式放入 M 个盒子（“ 不同 

的质点，不同的盒子，无限制地放入”）的问题.按照拉普拉斯古典賦概方法，利 
用第1节中公式 （10)( 与摆放质点的 “随机 方式”相对应)，证明，在指定的盒子 
中恰放入 fc 个质点的概率 P k ( n ; M ) 满足如下 公式： 


ti 一 k 


( M - l ) 


P k { n ; M ) = C ^ 

， M — 00 ,并且 n/M — A > 0 时，有 


M n 


并由此推出：当 


n oo 


X k 


一 A 


P k ( n ; M ) 


k \ 


(试与泊松分布相比较，参阅第6节和第二章第3节中的表 2.) 


n 


k (n-k)l 


译者注 • 


①原书为 P a = E (- l ) 


fc! n! 


fc=l 
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20 •(第 19题续）以 Rm ( n ; M ) 表示恰有 m 个盒子空着的概率.证明 


M—m / _ i \ 

E (-1) 他 (卜 


n 


Rm ( n ; M ) = 


并由此证明，如果 


M — oo, 并且 Me_ n / M — A > 0, 则有 


n oo 


A m 


A 


Rm(n; M) e ~ 


ml 


21. 仍然考察将 n 个质点放入 M 个盒子的问题，不过这次按照玻色-爱因斯坦统计 

方式进行（“无区别的质点，不同的盒子，无限制地放入”).以 Q fc ( n ; M ) 表示在 
指定的盒子中恰放入 fc 个质点的概率. 




证明 


—fc 


+ 71 — fc —2 


Qk ( n ; M ) = 




+n — 1 


又当 


并且 n/M — A > 0 时，有 


， M 


n oo 


— oo 


Q k ( n ] M ) -^ p(l 其中 p = 


1 + A 


(试与几何分布相比较,参阅第二章第3节中的表 2 .) 

22. 罐 中装有分别写有编号1, …， ikf 的 M 个小球，从中有放回地随机取出 n 个小 

球.以迨表示所取出的小球的最大号码是 fc 的事件.证明 


k n -( k - 1) 


n 


P ( A fe ) = 


M n 


并且证明，如果采用无放回的取球方式，则有 


P ( A fe ) - 


n ^ fc ^ M , 


吸’ 


23. 证明关于两个函数 f 与 g 乘积求导的莱 布尼茨 公式: 


N 


(f9) = ^2 C N( Dn f)(^ N ~ n ^ 


N 


D 




提示： 利用归纳法和帕斯卡三角形的性质，即 c ^ +1 = qj + 参阅第 2 节 
第2题). 
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§2. 某些经典模型和分布 


1. 证明 


n 


(x + y) n = J 2 C ^ x k y n ~ k (二项恒等式)， 


k=0 


n 


{x + y)n = C n ( X h ( y ) n-k (范德蒙德恒等式)， 


k =0 


n 


[x + |/]n = ^n[ x ]k[y]n-k (參尔伦德但等式)， 


fe =0 


其中 


( x) n = x(x — l)(x — 2) * • * (x — n + 1), 

[ x] n = x(x + 1)( 工 + 2). •. ( a : + n — 1). 


提示：利 用关于多项式的泰勒公式. 

2. 试运用各种观察方法,例如概率观察、组合观察(计算有利场合下的方法数目)、 
几何观察（计算由一个地点到另一个地点的路径条数）以及其他手段（例如，代 
数方法,包括计算与比较形如 （1 + xni+xf = (1 + x )^ b 的恒等式两端的 
的系数，等等)，证明组合系数的下述性质： 


n 


a : 


Ci n/2J = Ci nm 




C Q n <C l n < 


1 


< 


> • 




# • • 


即对称性与单峰性 （ Lx 」 三[: C ] 表示不超过实数 a : 的最大整数，称为 a : 的地板函 
数或高斯函数，「4表示不小于实数 a ； 的最小整数， 称为; c 的天花板函 数)； 

C k N ~ l + C %^ Ch 即 帕斯卡三角形 性质： 


J 


2 


4 


4 


6 


10 10 5 

15 20 15 6 


6 
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cX 2 + + ctl 

E 你 = 2 ' E(^) 2 = £2^ = 3^ = 


N 


N 


fc=l 


k=0 


fc =0 


fc =0 


N 


E (- 1 广 fc( ^ = c 益 - 


M > iV + l ， 


fc =0 


N 


N-2 


^fe(fe-i)c^ = iv(ivr-i)2 


N ^2 


fc =0 


N 


kC k N - NC k N Z \, = C k N \\, C k N C { = C l N C k N % l ( k 《 N ， 


k 


k 


k 


i ， yz c 3 N+i 


k 




=c 


k ^ N ~ 


N+fc+l ， 


i=o 


i=o 


i=o 


N 


/nrfc 


/nk I 

IjV — fc 十 ^ N-l 


O ^ k ^ N , 


-fct 


fc-i 


N-k 


Ni 


CKr 1+Na ( 范德蒙德二项卷积 ) 

N + l 


k~0 


C ^ C ^ 1 < ( C ^) 2 , 

\ 

r \ 

J 

或者，等价地 


/nrn—1 ^ 广 m 

^ In ， 




2 


M 


郎 +“(i + 葵 ） （ 1 + 芬 ) 


(AT + iV)t 

(M + Nf^+N x m m N n 






N- 


k 2 k = 1 


N 


= 5Z(-l) N+fc C^Cjf2 fc ^ n 


1 < n < iV ， 


fc^'TTr 


N 


E^ = 


N—n 


C ^， 1 < 71 < iV ， 


2 


fc=0 


N 


(-in 如果 W = 2 m ， 

其他情形， 

(- l ) m (3 m )!( m !)- 3 , 如果 JV = 2 m ， 

其他情形， 


^(-l) fc (C^) 2 = 


0, 


fc=0 


N 


D— 1 鱗 ) 


3 _ 


0 


fe—0 


=vl 

^ k 


N 


fc — 1 


(-i) 




k 


fc=l 


fe=l 


N 


0, 如果 i < iV ， 
isn , 如果 z = 


^(- l ) N ~ k k l C k N = 


k =0 


N 


\T^ nN-k 门 k c%2N 
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(亦可参阅第 22 题 .） 

3. 设 p 为素数， l < fe < p -2, p 彡 3. 证明， p 可整除 C 》， 且 Cf p = 2 (mod p ). 

证明，将正整数 W 自身拆为两个部分（即将正整数 W 自身表示为两个非负整 
数的和）的方法有 [ N /2] + 1种，其中[: r ] 是实数: c 的整数部分 • 

正如本书最后的附录所言，二阶斯特林数硕表示将一个 W 元集合，例如 
{1, …，},拆分为 n 个非空子集的方法数目（见附录，第31 2 页). 

证明如下性质成立： 


4. 


5 


■ 


1， S ^ 1 = C %. 


N^l 


( a ) = 1, S^f 

(b) 印 +1 = 5^ 一 1 +n 极 ， 1 < n < N. 


2 






N 


( C ) ^ + 1 = E 航一 1 ( 当 P > 谢，筇 = 0). 


fc—o 


( d ) S ^ = ^^(- l ) k C ^( n - k ) N . 

* fc ==0 

(e) ^ = ^E(-l) n " fc ^fe N . 

• k =0 


N—n 


广 m — i 

^ N-V 


( f ) s ^< 


n 


提示 : 证明 性质 ㈨ 是证明接下来的性质 （ c ) 和⑷的关键,而为了证明性 
质 （ b )， 需要利用关系式# = £硕⑷„(参阅附录，第3跗页）和 ( x) n+ i = 

{ x ~ n )( x ) n . 

6. 在附录的第3节中，（利用关系式 

( S ^) n>0 的指数型母函数 


fc =0 


N 


= E S ^) n ) 证明了：二阶斯特林数序列 


N 


X 


fc =0 


s 


N 


X 


Es ^ ( x ) = 5 ]v 

N^O 


N \ 


由如下关系式给出: 


{e x - l) n 


{x )= 


n ! 


试运用上题中的性质 （ e ) 重新导出这一关系式. 

7. 根据二阶斯特林数的定义方式之一（参阅附录第3节，第324页)， (-1)^-^ 
是正整数 {1, … ， i \ T } 的恰有 n 个循环圈的排列的数目 （A = 0). 
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证明， 


( a ) 4 = 1，4 = (iV —1)!(-1) N - 1 . 

( b ) 5 n+i — 


n — 1 


-Ns 


n 


1 < n < AT . 


s 


N > 


N 


N 


N 


= Ei^i 


( c ) B - 1 ) 

n=l 

并且证明 s n N , l ^ n ^ N , 满足代数关系式（亦可参阅附录第324页) 


N~n jn 


Nl 




n=l 


N 


⑷（咖=$>如 


n 


n~0 


其中⑷汊 =a?(x - 1) ••• (sc — iV + 1). 

提示: 递推关系式 ⑼ 既可用组合方法证明,也可直接由代数关系式⑷推 


出. 


8 - 证明，一阶和二阶斯特林数具有如下的二 重性: 


y ^ S^sif = Snm 


n^O 


其中心 b 为克罗内克符号 (L = 1, 如果 a / 6,则 < J a b = 0). 
9. 证明，一阶斯特林数 序列# = { s %) n>0 的指数型母函数 

E s? ( x ) = ^2 


N 


X 


n 


N \ 


N^O 


由如下关系式所 定义: 


( ln(l + x)) n 


E s n{x )= 

10. 根据定义（参阅附录第312页)，贝 尔数办 表示集合 {1,2,... , iV }( iV 彡 1) 的 

所有可能的拆分方式数目，亦即 


n ! 


N 


^n = E 5 n 

n—1 


其中巧^是二阶斯特林数. 

令执=1，证明， 

( a ) 递推关系式 


N 


D \7 ^ /"tfc — 1 D 

^>N = / ^ N - l-^N 

k=l 

( b ) 指数型母函数 E b ( x )= e B n ^ 由如下关系式给出 

JV>0 ' 

五 b(®) = exp{e x — 1}. 


一 fc . 


I 
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( c ) Bn < W ! 且 ^( ff ) 1 / 

验证 B u …， B 5 等于 1，2,5,15, 52. 

提示: 在证明 （ b ) 时，需要利用⑷，首先证明 E b ( x ) 满足微分方程 

dEs { x ) 


N 


= 0. 


= e x EB{x) 


dx 


且初值为 A ⑼= 1. 为证⑷中的极限式，需要考察级数 I ： b n ^ 的收敛半 

N^O 

径 i / ns ( ff )" 况(不难看出，该级数在实直线上对任何 x 都收敛). 

(斐波那契数）设 n > 1，用凡记将正整数 n 表示为若干个1和2的有 

1, F2 = 2( 因为2 = 1 + 1 = 2), F ^ = 
3(3=14-14-1=14-2=24-1), F ^ — 5(4=1+1+1+1=2+1+1=1+2+1=1+1+2=2+2). 

( a ) 证明，等于 n > 2 ,斐波那契数仏满足递推关系式 


11 


(*) 


F n = U F n 


- 2 » 


其中凡 =1 ，朽 =1. 

( b ) 由递推关系式 （*) 推出 


n+1 


n+1 


l + \/5 


i-VE 


(**) 


Fn = 




2 


2 


l + y/B 


l ->/5 


其中 


=—0.6180 • " • 

( c ) 利用递推关系式 W 证明，序列 { F n ) n >0 的母函数 F { x ) = X ： F n x n 由 


1.6180 •- ， 




2 


2 


n^O 


下式给出 


F { x ) = T 

( d ) 斐波那契数（最初见 18 世纪初斐波那契的“算盘学”讲义中关于克罗 
内克分解问题的习题）有着许多有趣的性质，例如 


(***) 


2 # 


— X — X 


i^l + i*2 + • * • + — 仏 +1 — 1 ， -^n-1 + 巧 —^2 

Fn^iFn -f F n F n+ i = F 2n +i, F m F n ^ F m _iF n -i = F m+ 


nj 


nj 


其中 m，n > 0,而 F—i = 0. 

试 m ± 列等式 • 

( e ) 证明,斐波那契数满足关系式 


[n/2] 


Fn^Yl C ^ 


fc =0 
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(可以验证 ( F 0 j Fi s ••- 5 Fi 7 ) = (1，1，2,3,5,8,13,21，34,55,89,144,233,377,610, 

987,1597,2584).) 

( f ) 证明，对于 9, 有 


F n 


j- e (n-l)/2-| - 

而（对于 n = 10) F 10 /[e 9 / 2 ! < 1 并且有 

r Fn 

|- e (n-l)/2-| 

提示：为证 (b) 中的 （ **) 式，首先应当找出递推式 = F n ^i+F n ^ 2 的形 
如凡 = W 的解.还可通过考 察函数 （ ***) 的泰勒展开式中的，的系数来证 
明 （ **) 式 . （应当指出 ：1 — x — x 2 = (1 — ax)(l — bx ), 其中 a = (1 + >/5)/2, b = 

(1 - V5)/2.) 

在证明 （ f) 中的 （ ****) 式时 , 应当注意 F„ 〜 Cl .(1.618 …)' 而 re— 1 )/ 2 "! - 
.(1.648-.*) n , 而 Q 和 c 2 皆为常数（试求出它们 ). 

12. 证明，对于多项系数（多项式系数） 


I 本氺本本> 


= 0 . 


C 2 


N \ 


CW (打1，…，打 r ) = 


7 ， ni + …+ n r = iV ， n » > 0 


ni ! 


n 


• • 


r • 


成立如下的关系式（范 德蒙德多项卷 积)： 

Cni+N 2 ( n l? > n r) — Cn! (fel ， … jkr)CN 2 {^l 一 尨 1 ， … ? n r — k r ) } 


T 


r 


其中求和对所有满足如下条件的整数 k ^ o 进行：匕< m ， E 心=爪 ， ！>i = 

i=l i—1 

Ni + N 2 . 

13. 证明 


(xi + … + x r ) N = 5：^，… ,1^)X1 1 -- 

其中求和对所有满足条件 tm ^ N 的整数进行. 

14. 证明，非负格点集合= {( ii ,--- , i r ) : h ，…， i r = 0,1,2,. .} 上的以原点 

(0，. . .，0)为起点，以 （ m ，. . .， n r ) 为终点（其中 E ni - N ) 的非 降路径 的条数 

等于 C N ( n lr - ， n r ). (所谓非降路径，就是每一步 只有一个坐标值增加一个单 
位的路径 

15•设4与 S 均为由有限个元素构成的集合（分别有叫和问个元素). 

对于函数 F : A — 丑，我们理解为对于每个 a € 都有某个6 €丑与之对 

应的法则. 

对 于单射 我们理解为不同的 aeA , 对应为不同的6 S 的法 
则（此时有 | 川< | B |). 


n 


- X 


r ? 
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对于满射 S . A ^ B , 我们理解为对于每个6 €氓都能找到某个 a €冼使 
n b = S ( a ) 的对应法则（此时有|必| 彡 \ B \). 

对于双射 3: A 我们理解为既是单射，又是满射的对应法则（此时有 
|4| = _• 

如果叫= N ,| B | = M , 证明，不同的函数、单射、满射和双射的对应法则 
的数目分别为 


iV ( F ) = M n , JV ( I ) = ( M ) n , N (§) = MlS } f ， N ( E ) - Nl 


N 


16 . 设 g { N ) n 为从 jv 个不同元素中取出若干个元素进行排列的方式数目 

的总和 { Cn)q = 1, ( N) n = N { N - 1 ){N - 2 ) … (JST - n + 1))， N ^ l . 证明， P N 

满足如下的递推关系式（凡 =1): 


Pn = NPn~i + 1， N ^ 1. 


证明 




n=0 


并且证明是与 eiV ! 最接近的整数. 

17. 证明，序列 P = (Pn)n^o (其中 Pn W 彡 0) 的定义见上题）的指数型母函数 

E P ( x )= g P N ^ 由如下关系式给出 •. 


N—0 


e x 


騎卜 d 


18. 证明⑸式 


提示 : 在所指的取极限过程中，应当利用 


Qi Mr 1 M 2 n 


2 


limP ( B ni)Tl2 ) = lim 


M n 


19. 证明，多项分布 { P (^,.., nr )} 的最大概率值在满足不等式 npi -1 < h < 

(n -h r - l)pi (i = 1，…， r ) 的点 （ fci ， …， fc r ) 处达到. 

①此处所要证明的 （5) 式为 厂设 n 与 M 为正整数 
Afi + Af ^ =而 


, Mi , M 2 为非负整数，有 ni + n 2 = 


， m ， W2 


n 


P(B?n ， n2)= 

Mi 4 oo , 并且染 — P , 则有 

P(B ni , n2 )^C^ n3 p n Hl-p) n2 




证明，如果 M 


oo 


译者注. 
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20. (一维 伊金格 ( Ezenger ) 模型） 设有 n 个质点,分别位于点1， …， n 上. 

假设每个质点都属于两种类型之一,其中第一种类型的质点有 m 个，第二 
种类型的质点有 n 2 个 (m + n 2 - n ). 并且假定所有 n ! 种排列是等可能的. 

试构作一个概率模型，并求出事件 ^(^11,77112,77121,77122) = {^11 — 

- m 22 } 的概率， 其中％ 表示位于第种类型的质点 


mi U 


^12 — 77112 , 1^21 = ^ 21 , ^22 


后面的第 i 种类型的质点的数目， i，j = 1,2. 


21 .设 iV 为某个群体的大小，要求不通过逐个数数的途径,而是利用“尽可能少的” 

资料估计出 iNT 来.详说这个问题十分有趣，例如，估计某个国家，或是某个城市 
的人口数量，等等. 

1786年，拉普拉斯为估计法国的人口数量,提出了如下的办法. 

从群体中取出部分个体，例如 M 个个体，把它们做上记号后放回群体.假 
定它们已经与其他个体“很好地混合”在一起.此后再从混合后的群体中取出 
个个体，以叉表示其中（这 n 个个体中）有记号的个体数目. 

( a ) 证明 ，X = m (在固定的 N , M，n 之下）的概率 P N ^ n{ x = 由超几 

何分布公式 给出： 


n 




P = = 


^ . 


( b ) 假定 M ， n ， m 给定，寻找使得- 达到最大的 W ， 亦即寻 
求导致有记号的个体为 m 的总体的“极大似然”的大小. 

证明，这样找出的极大似然值及（称为“极大似然估 计”） 由下述关系式所 


定义: 


~Mn 


N — 


m 


其中 [•] 表示整数部分（本题的延伸见第7节第4题). 

22 •在(初等)组合论中， 二 项系数 印三令= 也记为（？))，以及排列数 

( M) n = M(M -1) … （M - n +1) 通常 &仅对 正整数 n，M e N = {1，2,… } 有定 

义.在分析学中，考察 M 可以取任意实数 X 的排列数 ( M ) n 和二项系数往 
往是有益的.其中假定 n e {0, 士1，士2, *.. }，并且定义0! = 1， ( X)o = 1, Cx — 




如果 n > 0, 


( X) n = X ( X ~ l )...( X-n + l ), Cl = 


n ! 


而 = 0,如果 n < 0. 对所给出的这些定义（再结合第2题中的一些关系式)， 
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证明它们的下述性质 ( X , YeR t nez = {0,± l , ±2, ...})： 

( 帕斯卡三角 形)； 

n 

c^y = Y,c^- k (范德蒙德二项卷 积)； 


fc =0 


n 一 m 


= E(- 1 ) n_fcc x ； E 


fc =0 


fc =0 






+n — 1 


X +n — 1 4 


fc =0 


23. 罐中放有 JV 个球，其中有 n 个白球 ， N — n 个黑球 （ n 彡 2). 从中进行无放回 

的 取球. 我们来考察大小为 M 的样本.以表示在第 i ， j 个位置上放着白 
球的事件 （1 < i < j < Af ), 以 A id>k 表示在第个位置上放着白球的事件 
(1 < z < j ^ M ). 试求事件•与 Aij ^ k 的概率. 

24. 从一副 52 张扑克（不含大小王牌）中抽取13张牌，以 P n 表示其中恰有 n 张黑 

桃的概率.试 写出八 的表达式. 

25. 圆周上分布着 n 个点 （ n 彡3)，从中随机选择两个点,求此二点相邻的概率. 

(夫 妻邻座 问题） n 对夫妻 （n > 3) 围着一张圆桌坐下，男士与女士均相间而坐. 
试问，有多少种坐法使得任何一对夫妻都不相邻？ 

提 示:将 2 n 个座位（按顺时针方向）依次编为1，2,…， 2 n 号.为确定起见， 
假设在第1号位置上坐一位女士•以表示在第 fc 号和第 fc + 1号位置上坐 
着某一对夫妻的事件 （1 < fc < 2 n ， 将 2 n + 1号位置上理解为1号位置,如此等 

_ _ 2n 

等). 那么，所要求的夫妻都不相邻的概率就是 p ( n z fc ), 按照容斥公式（第1 
节第 12( b ) 题）有 


26 


fe=l 


( 2n \ / 2n \ 

n^ fc ) = 1 ■ p (u ) = 1 

k=l / \fc—1 } 


X ； p(^)+E p (^ n ^) 


P 




• 




i<j 


经计算可得，对于 1 彡 i < 2 n ， 


2 


(n — 1)! 


P ( A )= 


n 


n ! 


对于 1 ^ i < j ^ 2 n , 


2 


(n — 2)! 


，如果 hi — 1， 
如果 = 


n(n — 1) 


n ! 


P{Ai n Aj) 




0 
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其中 P (^4 i n 义 2 n ) = 0,并且一般地，对于“ < • 


" < tfc 


2 


n ! 


(n — k )\ 


若 1 ^ J ^ ^ - 1 有 Kj+i — ^ 2, 


(n - k )\ 


n ! 


p(a“ n • • • n Ai k ) 




其他情况, 


o 


事实上，所求的概率等于 


2n 


n 


(n — fc )! 






p 


n ! 


fc=l 


fc =0 


其中砣 是可以选出对互不相交的不同位置的选法数目，互不相交的意 思是: 
如果(《1，纟2)和（纟3，《4)是其中的两对被选出的位置，那么就有（〗1，《2)门(〗3，《4)= 


0. 


证明 


2 n 


= ^2 n 


fc 


2 n ~ k 


于是我们得到这样的答案：任何一对夫妻都不相邻而坐的概率等于 


n 


这 (-1 疒 ( n - fc )!^^4“. 


fc =0 


27. (拉 丁方） 我们来考察正整数 1,2, .. , n 以及由它们所列成的具有下述性质的 

矩阵（正方形)：每个数在每一行与每一列中都只出现一次 . n = 2 时的例 


n x n 


子 如下: 


1 2 


2 


2 


2 


= 3时的例子 则有: 


n 


2 3 

2 3 1 


12 3 

3 12 

2 3 1 


3 12 


以 L n 表示不同的 nxn 的拉丁方的数民证明 


n 


nn . 


L n > n!(n — 1)! … 1! 




k=l 


注:难以得到 JU 的确切表达式(个别的情况有： = 2, L 3 - 12, U = 576). 
现在知道其渐近表达式为 


In L n = n 2 Inn + 0( n 2 ) 


n —► oo . 
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28. (波 利亚 模型） 罐子里放有 r 个红球和&个黑球.从中“随机地”取出一个球，然 

后把它以及一个新的与它同色的球一起放回罐中.再重复同样的（取球和放球) 
过程，并一直进行下去. 

以&表示在 n 次这样的取球中所取出的红球数目.证明， 




1 


n—x— 1 


p {5 n = x } 


y 0 ^： n . 


n 


r+b+n_l 


29. 在上面的波利亚罐子模型问题中，记 


r 


以及 




Q = 


p = 


+ &• 


r + 6 

0,使得 np —► A , nj 1/ p . 证明，对于固定的怎，在 


r + 6 


r 


假设 


0, 7 


n — ^ oo ? p 


时有 


n oo 


Ap 


x 


P 


p{S n = x } Cl 


p+X—1 


1 + p 


1 + p 


2 n 个球中，黑球与白球各占一半，我们来考察将它们放入 m 个盒子的问题 
个盒子依次编有号码1， 


30- 


. m 


每个黑球落人第 j 号盒子的概率为 Pi ( pi +...+ 
= 1)，每个白球落入第 j 号盒子的概率为 幻 （奶+…+ = 1) .以 y 记恰好 

落有1个黑球和1个白球的盒子的数目.试求概率 P{v = fc }， A ： = 0, !_,••• 
和数学期望 Eza 




* • * 


Pm 


m 






31. (关于斯特林公式，还可参阅第3节第16题和第八章第8节第1题）从数学分 

析中已经知道如下的斯特林准确公式 


n ! = \/2^(-) ( 1+ i2 n ' 288 n 2 51 40 n 3 


139 


+ o 


n 4 


试运用关系式 


n 疒 

y^lnfe 和 ln(n — 1)! < / 

k=2 1 

其中 S \ = n\nn — n + 1, 给出关于 n ! 的粗略的上下界估计: 


n 


Intdt < Inn !, 


Inn! 


71 


n 


© 


n 


(*) 


<n\ < en 


e 




e 


并由其推出（通常的）斯特林公式 


n 


n 


n ! 〜 v 27 m 




e 


n 


32. (关于调和数的渐近展开）所谓调和数，是指队 = ：E i 几> 1. 


k 二 1 
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由数学分析中知道 


H n = Inn + 7 + 


+ 0 




n 6 /， 


2 n Yin 2 120 n 4 


其中 7 = 0.5772 .•• ，称为欧 拉常数 • 

试运用前一题中的通过积分估计和数的办法,证明，对于一切 n > 1，都有 


Inn H ——彡 H n ( Inn + 1 


n 


(并且由此有 

71—00 


§3. 条件概率.独立性 

1. 试举例说明，下列等式一般来说是不成 立的: 


P(B ⑷ +P ( 聯 ）= 1 ， 

P ( 寧 ） + P ( 耶 ） = 1. 


2. 罐中放有 M 个球，其中紙个为白球.考察从中取出的大小为 n 的抽样.以玛 
表示在第 j 步所取出的球为白球的事件，以為 b 表示在所取出的一共 n 个球中 
恰有&个白球的事件.证明，无论是有放回的抽样，还是无放回的抽样，都有 


k 


P( Bj \A k ) = ~. 


n 


提示： 对于有放回的抽样，应当首先证明 


n—k 


p(Bj n 為 t)= 


M 


n—k 


— Mi ) 


P ( A fc ) = 


M n 


而对于无放回的抽样，则应当首先证明 


C^zKMtUM ~ M ± ) 


P (玛 n^ fc ) 


=： 


(M) 


C^AhUM-Ah) 


P ( A fc ) = 


( M ) 


• 为相互独立的事件，其中 


3 .设力 


1 ， . * 


( a ) 证明 


u =1 - ri p ⑷. 


(*) 


p 


t=i 
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( b ) 设凡为事件木，…，為 1 中任何一个都不发生的概率.证明， 


- 扒 ), 


提示： 如果首先证明若事件 先 ，…， An 相互独立，则事件 不 ，…， In 亦相 
互独立，其中泛表示息或那么就可以给出一个关于 （*) 的直接证明（无 
需转化为第1节第12题中的容斥公式). 

4.设 A 和 B 为相互独立的事件，试用 P ⑷和 P(B) 表达 A 和 B 之中恰有 A ； 个， 
至少有 A : 个,最多有 A ： 个发生的概率,其中 A ; =： 0,1，2.并与第1节第13题相 


比较. 


设事件 A 与自己独立，即 A 与 A 相互独立.证明 ¥(A) 等于0或 1. 

证明，如果事件 A 与 B 相互独立，且/ g B ， 则或者 P(A) - 0,或者 

P(B) = 1. 

6. 证明，如果 A 为事件，且 P (^) 等于0或1，则力与任何事件 B 独立. 

7. 观察图4 (《概率》第一卷第一章第31页的附图）中的电路图，假设其中的元件 
八和五中的每一个处于断开状态（即不工作状态，不能通过信号）和处 
于闭合状态（即工作状态，允许信号通过）的概率都分别是 p 和并且它们之 
间的工作状态相互独立.试问，如果在入口处输入一个信号,那么能够在出口处 
接收到该信号的概率为多少？如果能够在出口处接收到信号,那么元件五处于 
断开状态的条件概率是多少？ 

提 示：以 S 表示可以在出口处接收到由入口处输入的信号的事件.证明 


5 


■ 


P(S| 五 ) = 1 —2p 2 +p 4 , 
¥(S\E) - 2q 2 - ^ 4 ; 


并利用全概率公式 


P (5) = g(l - p 2 ) 2 ~\-pq 2 (2-q 2 ). 


再验证 


(1 — p 2 ) 


2 


P(E\S)= 


(1 - p 2 ) 2 + pg (2 - q 2 Y 


8. 设 P (4 + S )>0, 证明 


P ⑷ 


P(A\A + B)= 


PCA + B ). 


设事件 j 与事件 (n > 1) 独立，且有战 n B ,* = 0, i ^ j . 证明， / 与事件 
D Bn 独立. 

n=l 


9 


_ 








































































第一章初等概率论 


*24 • 


10 . 证明，如果 P (川 C ) > P (寧)， P ( A \ C ) > P ( B | C ), jail P ( A )> P ( B ). 

11. 证明 


P (^| B ) = ¥( A \ BC ) P { C \ B ) + ¥( A \ BC ) P { C \ B ). 

12 .设 X 与 F 是相互独立的参数为 n 和 p 的二项分布随机变量，证明 


c^c 


m—fc 


¥(X = k\X + Y = m ) 


n 


，灸 = 0,1，…， min (m ， n). 




°2n 


13. 设 A B ， c 为两两独立的等概事件，且 A n s n c 


试求 P (乂）的最大可能 




0. 




值, 


14. 罐中装着1个白球，往里面放入一个“胡乱选出的”球，可能是白球，也可能是 

黑球（以相同的概率选择).此后以随机的方式从罐中取出一个球，发现该球为 
白球.试求此时罐中剩下的球也是白球的条件概率. 

15. 如果事件/与事件 B 相互 独立， 则按照定义就有 P ( AB ) = P ( A )¥( B ). 试描述 

对任意事件 A 与 B ， 如下两个不等式成立的条件： 


¥{ AB ) ^ P ( j ) P ( B ) 与 P ( AB ) > P { A )¥( B ). 


16. 试利用广义斯特林公式 （ n ! 〜 V 27 m 

J ^° u ^ e ^ du , > 0,具有性质 

r(j/) ~ V2?rn 


)，证明， r 函数 r ⑻= 


n n e~ n 


^ n oo 


. i/ — 1/ 

u e 


U ^ OQ. 


§4. 随机变量及其特征 


在本章中，空间 n 由有穷个元素构成，因此，此处所考察的所有随机变量也都只 
取有穷个可能值. 

1. 验证示性函数 h = Ia ( uj ) 的下列 性质： 


= 0， In = 1, % = 1 - I a , 

^AB = Ia ' Ib, ^AUB = + is — Iab^ 

Ia\b = ^(1 - ^b), Iaab = (Ia — Jb) 2 = 1,4 + /b (mod 2), 

n 

i - riG-k )， 

i=l 

其中 j △ B 是集合 j 与 B 的对称差，亦即集合 ( A \ B ) U (5\办和 E 表示不 
相交事件的并 （ U )- 


n 


n 


r^ 1 _ j 、)， 

i=l 






n 


n 


n 


LMi 


1 Z Ai ‘ 

t 


U Ai 


1=1 
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2. 利用第 1 题中的命题,证明关于三个事件 A , B , C 的示性函数的容斥公式: 

(Jahb + Iahc + Ibdc^ 

写出关于 n 个事件 ,^ n 之并的示性函数 I AlU 


Iaubuc ^ Ia + + Ic 


+ ^ AnBnc - 




的相应形式的表达 


UA 


參** 


n 


式. 


3. 设…，^为相互独立的伯努利随机变量，有 


P{Ct = 0} = 1 - AjA , 
P{Ci = !} = AjA, 


其中 A 为一个很小的数 ， A > 0, A , > 0. 证明 


n 


+ Cn = 1} = m AiJ △ + 0(A 2 ) 

p{ei + --+en>i} = o(A 2 ). 


m + * 


1r * 


4. 证明 inf E(C — a ) 2 在 a = EC 时达到，由此有 

—oo<a<oo 


inf E(C - a ) 2 = Df 

— ooKaKoo 


提示 :设 EC = 0,可得 E(e — a ) 2 = De + a 2 ^ De . 

5 .设 € 为随机变量,具有分布函数 F ^ x ) = P(e ^ x ). 称 M = M ( C ) (或 // = M ( A )) 
为随机变量 f (或分布函数 F ^{ x )) 的中位数，如果 


F d 卩 ―、^ 2 ^ 々(")_ 


(关于中位数的另一定义见下面的第 23 题 .) 


证明 


inf E |《 

—oo<a<oo 


=聰 


— a 


M - 


0,先考虑 a >0 的情形，此时我们有 


提示：设 




E | e - a | = Eie |+ E /(0, 


其中 


<0, 


a , 


X 


f(x) = < a — 2x, Q < x < a y 


x ^ a . 


一 a ， 
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既然/⑻彡0,所以 E / ⑹彡 0①， E|e - a | 彡 E | C |. 可类似证明 a < 0的情形 • 

6•设 F ^( x ) = P {^ =- x }, F ^( x ) = P {^ ^ x }. 证明，对于 a > 0, -oo < 6 < oo , 有 


X 




a 


x 




a 


并证明，对于 y 彡0,有 


F e ( v ) = F e (+ Vy ) - 巧 (— v ^) + ^(- Vy ); 


而对于 C + = max ($,0), 有 


0, 


x <0, 
F ^( x )^ 0. 






提示: 我们 注意: 


x — b 


x 


{ a ^ + 6 = a :}=^ = 

(C 2 ^ y} = {C = ~Vy} u {C 彡 +>M\{C < - 顿 ' 

( C + < x } 


， {a^ + 6 ^ a:} = ^ ^ 


a 


a 


0 ， : E < 0 ， 

{C ^ a ^}, 0. 

7. 设 C 与 W 为两个随机变量 ， DC > 0, Dr ? > 0, 以 p = p (^ rj ) 表示它们的相关系 
数.证明 | p | < 1，并且 | p | = 1当且仅当可以找到常数 a 与6,使得7? = < + 6. 
更进一步,如果 p = 1,则有 




V — Er ? _ C ~ 

V^v = 爾 


(这表明当 p = 1时,常数 a > 0), 如果 


-1 ，则有 


p 




T ] — E " 


c-Ee 




vdc 


(这表明当 P 


1时，常数 a < 0), 

0, a > 0 ,所以 P{e 《 0} H，P U > f } < I ，从而有 
E/(0 = aP{^ < 0) + E 屏 (0 <e<a)-aP(^>a) 

^ clPK ^ 0) + E(a — 2^)/(0 < C ^ 7 ：) + E(a — 2^)/(— < ^ < a) — aP ^ a) 




①由于 


M 




2 


2 


( 芒〉誉 ) 


a 


> aP(C ^ 0) - aP 

(pK^O)-p(^ > ^)) +E(a 

>E(a-2C)/(0<e^ ?) >0 


+ E(a-2^)/(0<C^-) 

20/(0 < e ^?) 


—CL 


2 


2 


译者注 . 
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8•设 e 与 W 为两个随机变量 ， Ef = Er ? = 0, Df = Dr ; = 1，以 p = p ( C ， r ?) 表示它 
们的相关系数，证明， 


Emax( 《 2 ， 7? 2 ) ^ 1 + yl- p 2 . 


提示：利用等式 


ax(^ 2 ? ^? 2 ) = ^(C 2 +^ 2 + |^ 2 -t? 2 |) 


m 


2 


和柯西-布尼亚科夫斯基不等式. 

9. 利用第1题关于示性函数的性质中的 J 

之并的概率容斥 公式： 

?(^4，1 U •. • U A n ) - E P (^n) - E P (4 nA i2 ) 


n 


i - na - u ), 证明关于事件 

i=l 




n 


U 

i— 1 








E p (軋 


m +1 


n Ai m ) + … + (~i) n+ 1 p(Ai n … 门义 n ) 


+(—l) 


n 


* ， * 




(与第 1 节第 12 题相比较). 

提示： 记足= J Ai ， 先证明如下的关于示性函数的容斥 公式: 


n 


E E 

i—l 1 彡 i 彡 n l^ix<i 2 ^n 


^%2 + … + 


E 


m+1 


Xn … X im + … + (— l) n+1 Xi - - - X n . 


+(—i) 


1 彡 U<“，<im 如 


n 


(比较第 1 节第 13 题的提示). 


再利用关系式 P U = EJ 


Tit 


LMi 

=1 


i=l 


10* 设 Cl ，. . .，Cn 为相互独立的随机变量 ， Pi = Wl ( Cl ，. • •， Cfc ) 和 #2 = V ?2( Cfc + l ， …， 

Cn ) 分别是两个关于6,…，&和 6+1，- ■. ， 匕 的函数,则随机变量灼与灼相 
互独立.试证明之. 

11. 证明，随机变量心，… ， Cn 相互独立，当且仅当对一切 


都有 


$1，…？ $71， 


Ftu … ^( x ir - ^n) = F^ ( 工 1) ■ U ： r n ) 


其中 F t 


) = P{Cl ^ ^1 ? * * * 1 Cn ^ * 

12. 证明，随机变量€与自己独立（即 C 与 C 相互独立)，当且仅当 e (^) = const , 


( 斯， … 


X 




n 


Tl 


u ; 6 O . 

13. 当随机变量 （ 满足怎样的条件时，有 f 与 sinC 相互独立？ 

14. 设€与 r ? 为相互独立的随机变量，且 r / # 0,试利用概率 PR < 4与< 

y ), x,y eR , 表示概率 P { Cr ? 彡 z } 与 P 


i 


彡 z 卜. 


V 
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15•设 C ， r/，C 为随机变量，有 ICI < l ,| r/K 1，| C | 彡 1. 证明如下的贝尔不等式：（参阅 


[123]) 


iEec-E^cKi-E^. 


提示：利用 （(1 + ?]) < 1 + ?7. 

16. 以相互独立的方式将 fc 个球放入 n 个罐子（每个球放入每个罐子的概率都是 

1/ n ), 试求不空的罐子的数目的数学期望. 

17. 设… ， Cn 为独立同分布的随机变量，有 P{Cl = P{Cl - 0} = 1 - 

其中0 < p < 1,记馬 = Cl + • - + 证明，对于1彡 m < n ， 有 


P ， 


k ryt—k 


m v n——m 


P(Sm = k \ S n = l ) = 


CL ■ 


18. 设匕，…，心为相互独立的随机变量，而 


Cmin = min(Cl ，•- ,Cn), Crnax = maxRl ， •… ,Cn). 


证明 


n 


n 


P {Cmin ^ n p 佑 > x} ， P{(max 〈工 } = n p ^<-}* 

i=l i=l 

19 .设① Cl ,*** ,6 n 为独立同分布的随机变量，有 P{Cl = 1}= P{Cl = -1} - i 记 

S 2 n = Ci + * •• + C 2 n , M 2n — max ( ( 9 i , - - - , S 2 n )- 证明，对于 彡 

P { M 2n ^ k , S 2n = 0} = r { S 2n = 2 k }, 


n 


因而 


k 


P{S 2 n = 2k} _ 

P { s 2n = 0} - cs n I 


P ( M 2 n ^ k\S 2 n = 0)= 


并由此推出 


0 


E ( M 2 n |5 2n =0) = 




2 = 0} 

20. 举例说明，存在这样的两个随机变量 f 与 t ?, 它们具有相同的分布函数的=⑸， 

但却有 P{C ^ ??} > 0. 

21•设《，7/与 < 均为随机变量，并且 C 与 n 的分布相同.试问， “与 TiC 的分布是 

否一'定相同？ 

22. 举例说明，存在这样的两个随机变量 e 与&它们自己不相互独立，而 e 与 V 2 

却相互独立， 




①原文为设 S 2n 二 6 +… + 《 2 n ， M 2n ^max(Sir- H 证明， 

独立性和分布的假设系译者顺应题意所加 


. 此处关于随机变量的 


译者注. 
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设 C 为离散随机变量，考察如下三种定义随机变量€的中位数 M = M ( C ) 的方法 
(参阅第5题)： 

(a) max(P {《 > 〆} ， P{( < m}) < 会， 

( b ) P{C < MK ^ P(C < Mh 


23. 


2 


} 


eR ： P{C ^ x} ^ - V . 


(C) fi 


inf 


x 




2 


假设 M a , M b , M c 是分别按照定义 （ a )，( b ) 和 （ c ) 所确定的中位数集合.试 
问，它们之间存在何种关系？ 

罐 中放有 iV 个球，其中有 a 个白球，6个黑球和 c 个红球 ， a + fe + 

取出 n 个球，设它们中有 C 个白球和 r ? 个黑球.证明，如果所进行的取球是“有 

放回抽球”，则 


N , 从中 


24. 




COV ( C , 7?) = 


- npg ， 


其中 p = a / N , q = b / N . 如果所进行的取球是“无放回抽球”，则 

N-n 


COv(C, 7 ]) 


—npq 


7V-1 


证明，在两种情况下都有 


pq 


p ( C ，？?） = — 




§5. 伯努利概型 I . 大数定律 

1.设 C 与 n 是两个具有相关系数 P 的随机变量.证明如下的二维切比雪夫不等 


式: 


提示： 不失一般性，可设 Ee = Et ? = 0, DC = Dr ? = 1，于是 

I = p|max(C 2 , 7 ] 2 ) > £ 2 }. 

再利用（通常的）切比雪夫不等式和第 4 节第 8 题中的不等式即可. 

设/卜）为非负偶函数，在正半轴上非降.证明，如果对于随机变量€ = C (^) 有 
e ( a ;) ^ C , 其中 C > 0,则有如下的下界估计： 


|C - EC | ^ 或 j ” 一 Er ?| > 


P 


p ICI 彡 s 或 


£ 


2. 


E /( e ) - m 


f(C) 


特别地，对于/ ㈤ =夂有 


EC 2 


2 


dc 


— £ 


^p{ie-Eei>s}u 


2 


C 2 


£ 
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提示： 利用下述关系式 


e/(ck E/(iei) < /(c)P{iei > 4 + /⑷- 


3. 设6, ••乂 n 为相互独立的随机变量，有< C . 证明 

Cl+ … +Cn E (^1 + ■ - - + ^ n ) 


c 


p 




7 l £ 2 


n 


n 


(该不等式表明，大数定律可在更为广泛的情况下成立，而不仅仅局限于伯努利 


情形 ,) 


4. 设 Cl ,...， Cn 为相互独立的伯努利随机变量，有 P 仿= 1} = p > 0, P{Ci 

-1} = l ~ p . 证明有如下的 伯恩斯坦估计 成立： 存在 G >0, 使得 


S n 


2 


(2 p — 1) 彡 £:卜《 2 e 


— aen 


p 




n 


其中 S n = & + … + ，而 £： > 0, 

提示：参阅《概率》第一卷第6节中关于 （42) 式的证明. 

5•设 C 为非负随机变量 ， a > 0. 试分别在下列三种情形下求概率 P {0 a } 的最 
大可能值： 

( i ) 已知 EC 

( ii ) 已知 Ee = m , DC 

( iii ) 已知 EC 

6. 设 Cl ， …， C / V 为相互独立的伯努利随机变量，有 P{^n = 1} = p > 0, P{^ n = 

令洗=0, Ash +. u + Cn ， 7^乂记尸„巧）=?{&=左}. 

证明，对于 n < iV 和/^1，有 


m. 


2 


a ' 


= a 2 且 f 关于自己的均值 m 对称. 


m 




0 } 






F n + i ( fc ) = pP n (k - 1) + qP n ( k )， 


7. 设 Cl , …，以为相互独立的伯努利随机变量，有 P 忆= 1} = P{Ci = -1} 
1/2, i = h …具 令 证明，对于 2 m < N ， 有 


—2m 


PH#0} = 2 


y^im 


8 •设 Af 个盒子被依次编为1，…， M 号.在第 n 号盒子中放有1个白球和 n 个黑 
球.从每个盒中“随机地”取出一个球.令 


1，如果自第 n 号盒子中取出的是白球, 
0，如果自第 n 号盒子中取出的是黑球， 


Cn = 


— 


§6. 伯努利概型 ii . 极限定理（棣奠弗 - a 普拉斯局部定理、泊松 定理) 
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并令 5 W = +…+ Cm 为所取出的白球总数.证明， “ SW 在 M 很大时具有 

InM 的阶”，意即对任何 s > 0,当 M 


时，都有 


oo 


Sm 


p 


— 1 ^ £ 


0 


InM 


(采用推导 （8) 式时的术语). 

9 .设…， Cn 为相互独立的^努利随机变量，有 P {6 = 1} = Pk , P {6 = 0} 

1 ^ ^ n , 其中 ^ Pk 二 a . 记5^ =匕+…+ $„,证明，对于给定的 

时达到其最大值. 

10•设匕,…，心为相互独立的伯努利随机变量，有 P{a = 1} = p , P {6 b = 0} 

1- p , l ^ k ^ n . 试在 n 次试验中仅成功了 1 次的条件下求第一次成功发生在 
第 m 次试验中的条件概率. 

11. 设 h ，…， Pr ) 与（奶，…，咖）为两个概率分布.试证明吉布斯不等式： 

r r 

Y]Pi lll Pi 彡 ~ Y]Pi ln 你- 

i—1 i=l 

(由此可以推出熵 /f = - EPilnp ^ lnr , 参阅第 4 节中的有关说明_) 

i=l 

12. 在第10题的条件下，证明雷尼 （ RSnyi ) 不 等式： 




l_Pk ， 

0< a < l ， 方差 DSW 在仍=… 


fc=l 


= p n — d 






2 


S n 


ne 


P 


- p ^ ^ exp 


2 pq ( l ^ s /(2 pq ) 2 ) j ’ 


n 


§6. 伯努利概型 II . 极限定理（棣莫弗 - S 普拉斯局部定理、泊松定理） 

1•设 n = 100, p = 1/10, 2/10, 3/10, 4/10, 5/10. 试利用二项分布和泊松分布的 
统计表（参阅 [12]), 将下列概率值与正态逼近和泊松逼近所给出的值进行 比较: 

P {10 < 夕⑽彡12}， 

P {33< ^ ioo ^ 35}, 


P {20< Si 00 ( 22}， 
P {40< S 100 < 42}， 


P {50< 5 ioo ^ 52}. 


(可以利用计算机等工具 .） 

2. 设$1，^2,…为独立同分布的伯努利随机变量序列 ，有 P{(i = 1} = P{^i = 0} 

& = 6 + … + Cn , n > 1. 令 - n 表示 n 重伯努利试验中成功次 
数与失败次数之差.证明 ® 




2, 


-j 2 /4n 


Slip y / wnP { Z 2 n = j } 一 


0 


e 


n oo . 


3 


-J 2 /4 


①原书为： sup y / wn ' P { Z 2 n = j } 


n 


译者注. 


— ► 0, 


— e 


n — > oo 


j 
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提示： 令 2 n = m ， A : - §+ n f 易见，所要证明的命题可归结为证明（其中 


1 / 2 ): 


P = 


2 


(k — mp) 


(三 supe ( fe , m )) 

A ? 


nm 


P{Sm = k} 


0, 


2mpq 


sup 


— e 


m —» oo . 


2 


k 


再利用 


snpe ( k , m ) = max ( a m? 6 m ) ? 


k 


其中 


e ( A :， m )， b m = 


e ( k y Hi )， 


a 


sup 

{fc:|fc—mp|^(mpg) s } 


sup 

{fc:|fc—mpj>(mpq) a } 


此处 S 为区间 (1/2, 3/2) 中的某个常数.再证明当 

bm —> 0. 

3. 证明，在泊松定理中，有如下估计式成立 OP = A / n ): 


时，有 


0, 


m — ^ oo 


dm 


X k e 


一入 


A 2 


sup P n ( k ) 




kl 


n 


k 


提 示:设 m ，…，％为独立同分布的参数为 A / n 的泊松随机变量,而 G ，… 
Cn 为独立同分布的伯努利随机变量，有 


A 


A 


x / n [ i _ 


P{Ci = 1} = 1 - e A / 


p{0 = o } 


n 


1 


e 




n 


n 


令 


0, 如果作 = 0, Ci 二 0, 

1，其他情形， 

则易见6,…，&为独立同分布的伯努利随机变量，有 


St — 


A 


A 


P 沁 =0} = 1 -—， P{6 = 1} = - 


n 


n 


从而 《 =Cl + * * * + 的分布为 P{f = k } = P n ( k ). 再注意到随机变量 
r/i + ... + 7/ n 服从参数为 A 的泊松分布,并且对每个 A : = 0,1，2,…，都有 


V = 


A 2 


P{^ = k }~ P{f] = k } 


n 


(试与第三章第 12 节中的证明与结论进行比较 

设6 ) • * ' 为独立同分布的随机变量，有 P{$fc = 1} = P {& = —1} = -( 对 
称伯努利随机变量)，& = 6 +…+ Cn , Pn ( k ) = V { S n = k }, 其中 A ： G 仏 = 

{0, 土1，…，土 Tl }. 


4* 
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利用全概率公式（第3节中的 （3) 式)，证明如下的递推关系式成立: 


凡+1(免） = — P n (^ + 1) + — P n (k — 1)， k G 五 n + i ， 


(*) 


2 


或等价地，有 


D). 


K +1 ⑻- Pn ( k ) = - [ P n (k + 1) — 2 P n ( k ) + P n (k 

5. (续第4题）随机变量序列 So = 0, Si - Cl , ^2 - Cl +6, …， = Cl + **'+Cn 
可以看成是质点作随机游动的轨迹，它自原点出发，在每个整点时刻或者向上 
游动一*个单位，或者向下游动一 '个 单位. 

从现在起,我们假定游动发生在时刻 △, 2△，…， nA ， 其中 △ > 0,并且在每 
个这样的时刻，质点或者向上游动量△: T ， 或者向下游动量△: T . 取代上题中的 
Pn ( k ) = P { S n = k }, 我们来考察概率 










p 


通过与递推关系式 （**) 类比，我们得到 

P ( n +1 )A (灸△怎) — (灸△尤)1 


PnA((A ： +l)AaO - 2P nA (A:Ax)+P„ A ((fc_l)AaO • 




△ 


2 


亦即“关于时间的一阶导数的离散形式”完全等同于“关于空间位移的二阶导 
数离散形式”的 i 倍. 

我们设= VS ， 并假定对于 t > 0, a e R , 在 

nA — > tj ky/A 

( a ) P t ( x ) = \ imP nA ( kVA ), 

( b ) 极限函数 P t ( x ) 满足热传导“微分” 方程： 

dP t ( x ) _ 1 d 2 P t ( x ) 

2 dx 2 


时，有 


， k 


n oo 


—> oo 


证明，在这样的极限过程中，有 


dt 


(贝塞尔,爱因斯坦). 


6. 作为上一题的推广,设作随机游动的质点每一步以概率 p ( A ) = 1/2 + Ax 往上游 

动距离△£[：，以概率 g ( A ) = 1/2 — Ax 往下游动距离仍设 △$ = \/ A , nA 

t , k^/A 

Pt ( x ) 满足方程 


. 证明，如同上一题一样，存在极限 Pt ( x ) = limP n /\( k \/~ K ) ^并且 




dPt(x) ld 2 P t (x) 

2 加 2 . 


dP t {x) 


= —2 


dt 


dx 


7. 应当对上面两题中的极限过程作怎样的改变，才能使得极限函数满足如下的方 


程 


明 ㈤ + V 州 ㈤ 


dP t ( x ) 


? 


= ~jjb 

(该 方程称为福 克尔-普朗克方程，或柯尔莫戈洛夫前向方程 


dx 2 • 


dt 


dx 


2 
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8.设& = F n ( t ), tG [0 3 1] 3 n ^ l , 为非降函数序列，对任何有理数 teQn [0, l ], 
都有 F n ( t ) ^ t . 证明,这种收敛性是一致的（参阅第三章第1节第5题)，即 


sup | F n ( f ：) — t \ — 0, 

峰， i] 

9. 证明，如下的不等式对一切^>0都 成立： 


71 — > OO * 


咖) 


X 


if ( x ) < 1 — ^( x ) < 


I X 2 


X 


其中 i 

提示： 考察导数/⑷ 和 （®— V㈤ 广 

10. 证明，对于泊松分布,有如下的局部定理成立：对任何免二0,1，2,…，当 A 

时，都有 


/2 


步 ㈤= J:oo W ⑼办， 


—X 


e 


x k 


Vx 


―入 


2 


( k ~ X ) 


a 


exp 


e 


kl 


v27rA 


2 A 


提示： 运用斯特林公式. 


§ r . 伯努利概型中“成功”概率的估计 

1. 假设先验地知道,参数0取值于集合 ©o g [0, 1]. 试说明，何时存在对于仅仅取 
值于该集合 e G 的 (9 的无偏 估计？ 

提示： 如果00是单点集 （00 = {^ 0 }),那么值00就是所要求的估计.如 
果 ©0 至少含有两个元素，那么为了存在无偏估计，必须且只需， {0} e ©0 和 

{1} G © o . 试 证之. 

2. 试在上题中的条件下，寻找相应的拉奥-克拉默不等式，并考 察有效 估计. 

3. 试在第1题中的条件下, 考察 关于沒的置 信区间 的构造问题. 

4. 在第2节第21题中进一步假定 AT 足够大 ， AT > M , N 》 n , 试考察估计 N 

的无偏性和有效性.试仿照关于参数0的置信区间的构造方式（参阅《概率》 

第一卷第74页中的 （8) 式和 （9) 式)，构造关于 AT 的具有如下性质的置信区间 
[N - a ( N ) , N + b ( N )}: 


Pjv,M ； n{iV - a ( N ) ( N$N + b ( N )} 


其中 e 是某个小的正数. 

5. ( x 2 相合性准则）设 Ci ，... 为相互独立的伯努利随机变量，有 P{Ci = 1} = 
P , P {& = 0} = 1 - p , 与第7节中主要研究关于“成功”概率 p 的估 

计不同，我们这里讨论利用观察结果 x = ( x ir -, x n ) 验证假设 Ho ： p^po W 
问题,亦即 p 的真实值是否等于给定的值0 < po < 1的问题. 


§7. 伯努利概型中“成功”概率的估计 


* 35 • 


记 S n (^) = 芝1 +…+ Cm 令 


2 


(^ n ( C ) - ) 


Xn(0 = 


npo(l -p 0 ) ’ 


试在假设丑 o 成立的假定之下，证明，对一切 x > ◦，都有 


i /2 办， 


P 


e 


fi — > oo . 


1 J Jo v^y 

(根据第二章第 3 节中的表3,函数 F ( x ) = /； 办是自 由度为1的随 

机变量 X 2 的分布函数,亦即参数为0和1的高斯随机变量之平方的分布函数 .) 

在检验假设丑0 : p = po 的 x 2 相合性准则的基础上,产生出如下的讨论模 


式: 


将 e > 0取得如此之小，使得在一次试验中，具有概率 e 的事件的发生非 
常罕见.（例如取 e = 0.01, 那么根据第5节中关于⑻式的注释，在100次试验 

中，具有概率 0.01 的事件平均起来，只会发生一次 .） 

根据所取的 e > 0,求出使得等式 / A °^ ^ e - y^dy = e 成立的 X ( e ). 

(根据 X 2 相合性准则）按照如下方式检验假设 H 0 : p = p 0 , 如果根据观察 

值怎=(町， •. •，〜 ） 计算出的量 x %) 超过 A ( e ), 那么就拒绝假设 Ho ： p = p 05 
而如果假设⑷彡 A ㈤ ，则接受假设 i / o , 亦即认为观察值 : c =(心， ... ，〜）与 
假设 p = Po 相合. 

( a ) 试利用大数定律（参阅第5节）验证 断言： 根据 x 2 相合性准则对假设 
H 0 ： p = Po 所做的相合性检验的结论（至少在 n 较大时）是唯一确定的. 

( b ) 试利用第 6 节（ 24 )式中的贝里-埃森 ( Berry - Esseen ) 不等式，（在 p = po 
的假设之下）证明， 


㈣ 。} - i ‘ 

{ xl (0 ^、(£)} 

的收敛速度，亦即设法确定在运用 X 2 相合性准则时，以事件> A n ( e ) 15 
取代事件^ (0 ^ 时所产生的误差. 

6.设$为随机变量,服从二项分布，有 


2 


y/2 dy ( 


sup P 


e 


y / np 0 (l -Po) 


(C) 设 X n ( e ) 由不等式 P 


( e 所确定.试求 X n ( e ) 趋于 A ⑷ 


Ve {^ = k} = C^O k (l~e) 


， 0 ^ A : ^ n 


其中 n 为给定值，而沒为“未知参数”，要求根据随机变量$的（唯一 ） 观察值 

mo . 


0 的标准估计是 THjn ， 它具有无 偏性： 对一切0 e [0,1]，都有 

E 0 T ( C ) = 0. 
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证明，在无偏估计类 T = T ⑹中，该估计是有效的，即 

E 0 (T(O - 0) 2 = inf E 0 (f(O - 6 ) 2 . 


T 


3,并且先验知道0 G (1/4, 3/4)，则对于任何0 # 1/2,估计 


再证明，如果 

T (6) = 1/2都是有偏的，但是却比无偏估计 Tg ) 二 C /3 更好: 


n 




E 0 ( T(O - 0) 2 < E e ( T (0 - 0)\ 


亦即 


2 


2 


9 I <c [ — — 0 


E 沒 


3 


2 


试对任何 n 讨论类似断言的正确性. 

7. 两位校对员 A 和 B 分别发现了 a 处和6处印刷错误，其中有 c 处是共同的.假 
定两位校对员相互独立地工作，试对尚未发现的印刷错误的数目给出一个“合 
乎情理的”估计. 

提示:假定印刷错误的总数 n 很大，而 a / n 与 &/ n 是关于两位校对员 A 和 
B 分别发现一处错误的概率 p a 和外的足够好的估计，再进行有关概率的讨论, 


§8. 关于分割的条件概率与条件数学期望 

1. 试给出两个随机变量《和仏它们不相互独立,但是却有 


m \ v ) - Ee 

(试与命题 （22) 相比较.此处以及下面，均适用本习题集本章第4节开头的注 


释 .) 


2 . 随机变量$关于分割贷的条件方差定义为如下的随机变量: 

(( e - E _) 2 | 吟 


D($|^)=E 


证明 


DC= ： ED(e|^)+DE(e|^). 


提示:验证 

ED ( ㈣ 二 EC 2 - E(E ⑷货 ))2 和 DE ( C |^) = E(E ⑹货)) 2 一 ㈣ 2 . 


3. 试从 （17) 式出发，证明，对任何函数/ = m , 条件数学期望 E ($| r ,) 都具有如 
下性质 


E (/( r ?) E (彻 )）= E ( f / ⑼) • 


§3. 关于分割的条件概率与条件数学期望 
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设 C 与 U 为随机变量.证明， infE (7?-/( C )) 2 在函数广⑹= E (咖）处达到•（据 

此结果，根据《对 r / 所作的最小方差意义下的估计就是 E (7?|0-) 

提示： 试验证对任意函数/ = / ㈤ ，都有 

E (?? — /⑹) 2 = E ( r ?— 广 ( e )) 2 + 2 E [( t /- 广⑹)(广(0 — /«))] +珂广⑷- /( C )) 

其中中括号 [.] 中的随机变量的数学期望为 0. 

5.设 Ci ,-** An . r 为相互独立的随机变量，并且6，，. .，& 同分布，而 t 取值 
1，…， n ， 令& = 6 +…+ f 为随机个随机变量 的和. 证明 

E (5 r | r ) = rE ^ i , D (5 r | r ) = tD ^ i , 

ES r = Er - E ^ i , D 5 r = Er D^i + Dr ( E ^ i ) 2 . 

提示： 在证明后两个等式时,可利用前两个等式，即 

E (5 r | r ) = rE^i 和 D (5 T | r ) = rDCi - 


4 


2 


6. 证明等式 (24).® 

7. 设忒是具有基本结果空间 n = •，叫 } 和概率（“权重”） PFPk)，EPi 

1的试验.在第5节 （14) 式中曾将丑= 

的熵，并以其作为试验#的“不确定性”程度的 度量. 在那里还证明了，“不确 
定性”的最大值在所有&个不同结果均以相同的概率出现的试验中达到，此时 

H = \ nk . 


k 




k 


- J 2 pi Inpi 定义为分布 （ Pi ，..，， Pfc ) 

t=l 


对数函数（在等概场合下）作为“不确定性”程度的度量是很自然的，其自 
然性由如下命题（也是本题所要求证明的结论）所 确定： 

假设具有 A : 个基本结果的试验忒的“不确定性”程度由具有下述性质的 I 

数/⑻来确定：/( I ) = 0,而若免> L 则/⑻> /价并且我们假设 _ 
f ( k ) + f ( l ). (这一性质反映了这样一种需求：对于分别具有 和/ 个基本结果 

的相互独立的试验戽和爲，如果我们将试验 A ( g }^2 定义为同时进行两个试 
验负和馬,那么负 ® 尚的“不确定性”程度就应当是两个试验的“不确定性” 

程度之和 .） 

证明，在所述的条件之下，函数/⑻具有形式/⑻= clog b A :, 其中 
为常数，而 log ， 是以&为底的 对数. 


S 2 


c > 0 


①此处所要求证明的 （24) 式为：设随机变量 f 与分割受独立，即对任何认 G 级，随机 变量豸 都 
与随机变量/&相互独立.证明 


e(ci 负） = e 《 


译者注. 
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注： 由于在不同底的对数之间存在换底公式 log , k = log , a - log a k , 所以当 
以不同的底的对数度量“不确定性”程度时，只不过是所采用的计量单位不同 
罢了.通常人们采用& = 2. 由于对于= 2,有 log 2 k = l , 因此可以说，在具有 
两个等概的基本结果的试验中，“不确定性”的程度等于1 (个单位).在通信理 
论（尤其是在编码理论）中，这种“不确定性”单位称为二进制单位或 BIT (英文 
词汇 Binary digiT 的缩写).如此一来，如果试验#是具有 A : = 10个等概的基 
本结果，那么它的“不确定性”的程度就等于 log 2 10(^ 3.3) BIT . 

8.设（51，多， P ) 是某个离散概率空间，€ = 是随机变量,它分别以概率 PU = 

我们将 


取值 


Xi } 


Pi 


$1,…, 办 * 


k 


只 ⑹= - ^ Pi log 2 p 


称为随机变量 e 的熵（或由 f 的观察值构成的试验今的熵 )•( 试与第5节 （14) 
式相比较，那里不是使用以2为底的对数 log 2 , 而是采用自然对数 In . 正如我们 
在上题中所阐明的那样，它们之间没有原则性的区别 .） 

如果 U . rj ) 为随机变量对，有 P 仪 
1, …乂 则该对随机变量的熵相应地定义为 


V == Vj} = Pij，i = h 






■ * * 


k 


log2 Pi ^ 


证明，如果 $ 与 T ] 相互独立，则 H (^ V ) - H {0 + 

9•设为随机变量对，它们的所可能取的值为（而 ，％•)， i = 1，…， k , j 二 
1，…，我们将 


H Xi (?]) = -^P{r; = ^ IS = Xi}log 2 P{r/ = Vj\^ Xi} 


j=i 


称为随机变量 r ? 关于事件 {《 = 而} 的条 件熵. 而 r ? 关于 《 的平均条件熵则定 


义为 


k 


— P { (二 x i}^Xi 


证明 


( a ) H (^ r ] ) = H (0+ H ^ r ] ). 

( b ) 如果 （ 与 r ? 相互独立，贝! I if ( C , rf ) - H {0 + H ( ri ). 

( c ) O ^ _) ( H ( V ). 

10 .设 ( C , r ;) 为随机变量对，称 


§9. 随机游动 I . 掷硬币博弈的破产概率和平均持续时间 


.39 . 


为含于€中的关于 r ? 的信息量.该术语的含义是：差值丑⑻-丑 e ⑹ 表明随机 
变量 C 可以在多大程度上减小随机变量7?的“不确定性”. 


证明 


( a ) 1^(") =心 ⑹彡 0. 

( b ) mrj ) = H (7]) 当且仅当 7? 是 $ 的某个函数 • 

( c ) 如果 《, r ; 和 C 为随机变量，则 


%,c)( 7 ?) 二丑 ( ⑴ — H (u)(v) > h(v)^ 

意即随机变量对 ( C ，0 中所包含的关于 n 的信息不少于单个随机变量€中所包 
含的信息. 

11.设…，&为独立同分布的伯努利随机变量，有 p{a = 1} = p , p(a = o } 

1 — P, 令* S n = + …+ Cn * 证明 




/{ x } ⑻ 


S n — ^ 


(a) P{Cl An = 


X 




k—x 


c 


m 


( b ) P { S n = X I S n+ rn = k }= 




+m 


= 0 , 1 , 而且 x ^ k . 


其中 x = Xi + 


• + 


■ • 


随机游动 I . 掷硬币博弈的破产概率和平均持续时间 

1. 证明，作为 （33) 和（3旬式推广，有 

E 5 ^x = x -\-( p - g ) E <, 

E(^-<Eei) 2 -D6*E< 

试研究当水平 A 1 - oo 时，量 Pi x ), m (: r )( 定义见《概率》第一卷第 85 页 
的 （ 13) 式和第 89 页的 （ 2 6) 式） 分另 1 j 收敛于何处？ 

提示： 答案 如下： 


§9 




2 


+ X ■ 


2. 




0 , 


lim a ( x ) = 


(q/p ) 13 - {q/p) 


a 


， P<<b 






— X 


p> <h 


P-Q 


lim m ( x ) 


A 
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3. 设在独立同分布伯努利随机变量序列中，有 p = g = 1/2. 证明 


2 


Ej 5 n | 


(*) 


— n 


n oo _ 


7T 


提示:可以直接推出如下的关系式（即所谓离散型“田中公式 （Tannaka for ¬ 
mula )”， 亦可参阅第七章第9节第8 题): 对 n > 1，有 


n 


l ^ n | = ^ sign (5 fe ^ i ) AS fe + N n 


(**) 




其中 So = 0, 馬 = 6 + … + 匕 ， ASk = Cfc 


1 ， 


a; > 0, 


sign ® = < 0 


x = 0 


— 1 ， X <i 0y 


M N n — #{0 ^ fc ^ 

数.于是就有 


1 : Sk — 0}, 即使得馬= 0的 A : (0 彡 A : 


1) 的个 


^ TI 一 


71 — 


n—1 


n 一 1 


E^/(5 fc =0) = ^P{5 fc = 0}. 


E5 n =EN n = 




fc=l 


k=l 


再利用 P { S 2k = 0} = 2- 2 fc C 2 \, P {5 fc - 0} = 0. 

注:由 （***) 可推知 


2 


EiV n 


TL —> 0O_ 


— n 


7T 


(亦可比较《概率》第二卷第七章第 9 节例 2.， 不过应将该例中 （17) 

中的 1/27 T 换为 2/ tt .) 

两名游戏者相互独立地抛掷自己手中的均匀硬币（每人一 枚). 证明，他们在各 
自抛掷的 n 次之中所抛出的正面次数相等的概率为2- 2 « f ：( C ^) 2 . 并由此推 

k =0 

出等式 f ： (^) 2 = (亦可参阅第2节第2题). 

jfc— 0 

设汀 n 为首次出现两人的正面相等的时刻（如果直到掷完 n 次，都未出现 
两人的正面相等，则令 a n =： n + 1). 试求概率 P { cr n = k }， 1《 ( n + 1，并求 
数学期望 Emin (< T n5 n ). 

提示： 如果第 A : 个人在第 i 次抛掷时掷出正面，就令匕⑻ = ; l ， 掷出反面，就 


和 （18) 式 


4 . 
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令= — 1， A : = 1,2. 那么就有 


n 


n 


P { 两人在 n 次拋掷中掷出的正面次数相等 } = P j = E ^ 2) 


i=l 


i=l 


4 =e 

) j =0 


n 


n 


n 


=E p ： E# = m，Ef =幻 


2~ 2n (Ci) 2 




J =0 


t= 


以及 


2n 


n 


n 


Ef) = Ed 


( 2 ) 




_ o—2n/^rn 

— Z 


p 


=p 


= o 


i=l 


% — 




其中 m = 

5 •设 Cl , * * * 为相互独立的对称伯努利随机变量，即有 P{Ci = 1} = P{Ct = 

-1} = 1/2, 记& = a + •. • +《 n ， l ^ n ^ N . 试求概率 


- CP ， 


妒 ，… • 


m 


Vs = 


m = - 


{S n — 0} 


P 


Ni<n^.N2 


亦即在集合（爪+ 1，… , AT 2 ) 中存在 n , 使得& = 0的概率，其中1 <爪+ 1 < 

N 2 ^ 7 V . 

6. 设••乂 iv 夫相互独立的对称伯努利随机变量，即有 P{^t = 1} = P {^* 

—1} = 1/2,记 S n = & +…+《„和= € o (— l 产为离散的电报信号，1 ^ n ^ 

AT . 试求随机变量的分布与方差 

并求条件概率 




P { X n = 1 | = i } 7 i = 土1， 1 ^ n ^ N . 


7. 设 a , …， 6 v 为独立同分布的伯努利随机变量，有 P 仿 = 1}= P ， P {& = -1} = 
1— P . 记氏：^ +…+匕 S o = 0. 设深 at 为随机游动&，&，■•.，如 
的变程，即它们的值集中的不同元素的个数. 

试求 e 深 w 和 im N . 试问，对于怎样的 p , 变程岛 v 满足如下形式的大数 


定律 


级 N 


P 


0, N oo ? 


> £ 


— C 


N 


其中 e > 0,而 C 为某个常数.（亦可参阅第二章第6节第87题和第八章第8节 
第16题 


①原文 为：求 的值与方差 —— 译者注 . 
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8• 设 ^ ， … ，为同分布随机变量（不一定为伯努利随机变量 ) ③，记茂 3 = 0, 氏 = 
Ci+ ••*+€“ 1 $ i $ iv. 


令 


n 


Nn = y^^I{Sk > o) 


k=l 


即序列 s Q ， s u … ， s n 中的正数的个数 . 证明如下结果（斯帕尔 - 安德森 ) 


P{iV n = fc} = P{iV fc - k}P{N n ^ k = 0} ， O^k^n. 


设 & ， … ， ev 为第 7 题中的伯努利随机变量，我们按如下方式定义变量 A ，…, 
Av ， 其中 


9. 


X\ = ^i, X n = AX n _i + €n ， 2 < n < iV 7 A G K.. 


试求 EX n ， DX n 和 cov {X n , X n+ ki) 


§ 10 . 随机游动 II. 反射原理.反正弦定律 


时 ， E min(cr 2n , 2 n) 以怎样的速度趋于 oo ? (其中 
k^ 2 n: S k = 0}; 而如果对一切 1 < fc 彡 2n ， 都有氏 # 0 ,则令 


min{l ^ 

02u = OO 


1 . 当 


汀 2n 




n — > oo 


或 


02n = 2n.) 


提示 : 根据命题 1 ， 我们有 


n 


2n) = u 


Emin(a2n ， 


2( fc — l ) + 2 nU 2 n ^ 


fc=l 


l/V ^. 因此可知 


其中 


汉 2n 


Tl 


Emin(fi2n ， 2n) 


4 


n —^ oo. 


7T 


Sk ― 1}) 而若对一 '切1 < < n ， 都有 Sfc < 1，则令 

1/2 ) 和不对称的伯努利游动 


2 . 设 T n = min{l ^ k ^ 

丁 fl = OO. 


TI : 


试问：对于对称的伯努利游动 & 

时 ， Emin (r n ,n) 分别趋向于何处 ? 


Q 






(P #办当 

提示: 本题答案为 


n — ^ oo 


(p-qy\ 


p> <h 


Emin (r n , n) 




①原文中就没有独立性假设 —— 译者注 • 
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3. 以《概率》第一卷第 10 节中的思想与方法，证明，对于对称的伯努利随机游动 

1/2), 如果记％ = 0, & = & +…则有如下各关系式成 


(P 


<1 






AL (N 为正整 数 ): 


P{S n > N} 


S k >N, S n <N 


P 


max 

i 




max S k ^N\ = 2 P{S n ^ N} - P{S n = N}, 

1 k TX 


P 


■n + iV+1 ， 


P{S n = N} + P{S n = AT + 1} = 2 - n C v n 


2 


S k = N 


P 


max 




n 


P{^n = 0} + P{S n = 1} = 2- n Ck 2 \ 


max 5^ ^ 0 


为 < 0， > 0 > — P{Si 笋 0 ， … ， S n ^ 0, S n ^i = 0}, 


P 


max 


-1 


P {^ > 0,…， S 2n -1 > 0, S 2 n = 0}- r 2- 2 n C 2 n , 

P{5i > 0 ， … ， S2n-1 > 0, S 2 n = 0 } 二 


n —2, 


Tl 


2 —2n/^rn 

°2n* 


再证明 


P{S 2n - 2fc} = 2— 2n C《— k 


， k = 0 , 士 1, ♦ ♦ • ，土 n 5 


n 


与 


—2n —1/nrn—fc 

0 2n+l ， 


P{5 2 n+l=2fc+l} = 2 


= -(n + l) ， 0 , 士 1 


• ，如， 


蠡 * 


上述二式可以统一地写为 


( n - k )/2 


如果 fc 三 n (mod 2 )， 

其他情况， 


2 — 


P{5 n 二 k}= 


0 


其中 A ; = 0, 土 1, …，士 n . 

作为上面仅仅关于正整数 iv 的概率关系式 P 
0,1，…， n ， 证明 


S k = N \ 的补充，对 


max 


于 


r = 


Ps max = r ^ 

lo^k^n ) 


— 2- n C[( n _ r )/ 2 】. 


n 


4. 设《1，…， 《2 n 为独立同分布伯努利随机变量，有 P{Cfc = 1} = P{Cfc 
1/2, k ^ 2 n. 令 So = 0,私 = 心+…+心，而 


- 1 } 


=： 


rz: 


Q2n = max{0 < < 2n : 灸*： = 0 }， 


即序列 S 2 ， Sd 2 n 中最后一个 0 的出现时刻，若这种时刻不存在，就令仍 n = 


0 . 
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证明 


P {52 n = =從2打以2(71-灸)，1 < 左 < 


其中以 2 fc = ^{ S 2 k = 0} = 2 - 2k h 

(以 P2k , 2n 表示质点在区间 [0,2 n ] 中有 2 fc 次向右移动的概率（参阅第10 
节 （12) 式),试将孤的分布与 P 2 kan 相比较，即可看出，就像 （15) 式所表明的 
那样，对于0 < x < 1，有 


2 


P {92 n = 


— arcsin \/x, 


n — > oo, 


7 T 


{ fc : 0< fc / n ^ a ;} 


亦即最后一个零点出现时刻的概率分布渐近于反正弦律 .） 

5. 在上一题的条件下，以 6> 2 n 表示&， S u …， S 2 n 中的最大值的首次出现时刻，即 
如果 S 0 < S kr - , S k -i < S ky 并且 S fc+ i ^ S k S 2 n ‘ S k ， 则有 0 2n = fc ; 而 

如果不存在这样的> 1,则令化 n = 0. 


证明 


P {^2 n = 0} = U 2n , P {^2 n = 2 n }= 


7： u 2 n ^ 


2 


而对于 0 < A : < n , 则有 


P {(9 2n = 2 fe 或 2 A : + 1} 

并由此 推出： （类似于上题）对于最大值的首次出现时刻成立反正弦 律：对 0 
<1’有 


= - W 2 fc ^2 n -2 fc - 


2 


< 


x 


E 2 

P{0 2n = 2k 或 2fc+l}— — arcsin yfi 、 

7 T 


n —^ oo- 


{fc: 0<fc/n^x} 


i 的情形. 

6 •设& = & + … + 心 fc < 2 n , 其中 Cl ,-** 为独立同分布随机变量，有 

P{Ci = 1} = P{Ci = -1} - 1/2. 证明 

( a ) 对于 r = 士1， . •，士 n , 有 


还可考察 a : = 0和 


X 




r 


— 2 ti _ 


P{& 兴 0, 、 •‘ ， *^271-1 7^ ^2n = 2r} = 

0, 土1， * • * ，士 n ， 有 


2 


n 


(b ) 对于 


r 




一 2n 


= 2r} = C 2 ~ r 

7 •设 Cl ， …， Cn 为独立同分布随机变量，有 P{Cl = 1} = P {$! - -1} - 1/2. 记 
So =0, & = 6 +…+ Sfc ， 1彡 A : 彡 n ， 称{&， k ^ n } 为对称伯努利随机游动. 


2 


令 


M n = max Sk 


min Sk- 


m 


n 
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证明 


(M n - S n , S n - m n , S n ) l = (-m n , M n , S n ) 1 - (M n , 

表示相应的三个随机变量的分布相同. 

8•设 * So 二0 ， Sk — Ci + ' * * + Cfc ) k ^ 1,其中 $ x , ^2) * * * 为独立随机变量，有 

= 1} P{Cfc = —1} = Q , P + Q = 1- 证明 


S n ) 


—m 


ni 




其中 




P^j max Sk ^ N, S n =m\ = C^p v q n 


—v 


其中 U = N +- m)/2 , 而 t ； = (n + m)/2, 并由此推出，当 p = g = 1/2 和 

彡 iV 时，有 


m 


}= p {5 n 

9 •设 € l ， C 2, …为独立随机变量的无穷序列，有 P{Ci = 1} = ^{Ci = ~~1} — 1/2. 令 

So 二 0, 5 n = a + ---+ Cn , 并且对于 xez = {0, 土 1，士 2, … }，定义时刻（时刻 

0之后首次到达状态; r 的时刻） 


Sk — ^ ? S n — Ul 


2N-m}~ ¥{S n = 2iV - 


P< max 


+ 2}, 


m 




(Ti(x) = inf{n > 0 : S n = x }， 


如果 {•} = 0 ，则令 <7i(x) = oo* 

证明，对 ■于 z = l ,2, •，有 


—2n— 1 


2 


P{<7i(x) > n} = Sk < x\^ P{ai(l) = 2n + 1}= 

P{cri(x) =n} = -2~ n C^ 


n 


2n ， 


n + 1 

P{a 1 (l)>n} = 2~ n C [ n /2] . 


(n+x)/2 


n 


注： 关于独立随机变量无穷序列 Cl,6,*** 的存在性问题，见《概率》第 
卷第一章第 5 节第 1 小节 . 

10. 设上题中的条件成立，除了定义 a.ix) 之外，再定义时刻 




crk(x) = inf{n > a k -i(x) : S n — x}, = 2,3 ,…， 


如果 {■} = 0 ，则令 crfc(x) 

等于 X 的时刻 

证明，对于 n = l ， 2 , …，有 

P { a “0) =加} = 2" 2 -+ 1 n - 1 C 2 V _ 1 2 , 

P{cri(0) > 2n} = 2~ 2n C^ n =： P{S 2n - 0}, Eo*i(0) - 

再证明， cri ⑼ , <72 ⑼ - ai(0),cr 3 (0) - a 2 (0), - *• 形成独立同分布随机变量序列 . 
( 这一性质是 “ 再生周期 ” 方法的基础，该方法被广泛地应用于随机游动的研究 , 
更详细的论述参阅本书附录第 7 节 


( 这一时刻的含义是清楚的， a k (x ) 就是第次 


oo . 


— 


P {< Ji (0) < oo } = 1， 


OO . 
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•11. 设 Cl ，&， …与上题中的相同.令 


L n ( x ) = #{ fc , 0 < < 

( L n ( x ) 就是随机游动 {5,}0<^ n 到达状态 Z 的时刻的数目，其中 
土2,…；试比较第七章第9节第8题中所引人的类似变量 N n ( x ), 亦可参阅本章 
第9节第3题.两个变量 L n ⑷与 N n ( x ) 通常被称为时间集 合忭： O ^ k ^ n } 
中位于状态 x 的局部时 .） 

证明，对于 fc = 0， l ，...， n ，有 


Sk = x}. 


n : 




0,士 1， 


X = 


— 2 n+k 


P {^2 n (0) = k } = P { X 2 n+l ⑼ = k }= 
P { 4 ⑼ = k } = 2 - 

P { jL2n ( 0 ) < k } — P { afe (0) > 2 n } = 2 


r^Tl 

°2 n 


2 


—fc ， 


fc — l 




— 2n 


J =0 


: X 


( j + x )/2 


对二 E 


P{L n (x) = 0} = P{ai(x) > 


2 一 3 


3 


j~n+l 


而方 t 于 ： r = 土1，土2, ■ •，有 


2 W — 1 


p {^cn(o) W = 0}= 


⑼ ⑷ = 1， 


EL 




2| x | 


(变量 ai ( x ) 的定义见第 9 题 
12. 在上题中的条件下，令 




fi ( n ) = min < fe , 0 ^ k ^ n : Sk = 


max 

O ^ j^k 


证明 


广 [ 友 /2} [fc/2] 2n—l 

^2[fc/2j • °2n-2[fc/2] # ， 

广 m o — 2n 

^2 n * L ? 


fc = 1，2, 3, 


…， 2 n ; 


P {/ i (2 n ) = k }= 


k = 0. 


§ 11 .鞅.軼对随机游动的某些应用 

1. 设孰4货1 4…4氣为分割序列，孰=…};取为紙可测的变量， 
证明，按照如下方式定义的序列$ =(心，紙) 是鞅： 


n. 


k 




E ( 7 ?f I ^_ l ). 


m 


1=1 


提示： 直接验证 E ( a +1 - Cfc 丨孰 ）= 0. 
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•， r? n 为随机变量，有 Eqi = 0， E(” k I 吼， • ，取 — 1 ) = 0，1 彡 fc < n , 令 


2^设 


Vly ^ 

Cl = Vu 


k 


Cfc+i 二乙咖 ，… ，巧 i) 屮 + 1 ， k <n, 


其中 Mmm ) 为某些函数.证明， 序列卜 (6)1^^ 为鞅. 

3. 证明，任何鞅序列 e = ( a , ^) i ^ n 都具有增量不相关性，即若 a < 6 < C <式 
那么就有 


COV(^cJ _ Ccj Cfc — Ca ) 

(再次强调一下,本章括号内的随机变量都只取有限个值 .） 

4 •设€ =…，匕）为某个随机变量序列，其中^为涿可测 咏找令叫 
9 n ). 证明，为了该序列关于（汍）是鞅，必须且只需，对于任何关于汍的停时 
都有坎 T = E &. (“对于任何停时”可以换为“对于任何只取两个值的停时 
提示：设对于任何只取两个值的停时 T ， 都有 E & = E &. 取定 fc G {1，…, 
-1}, 考察停时 


0 . 
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如果 Cfc (^) ^ 
k + 1, 如果 CfcMe A . 


fc ， 


r (( jj ) — 


证明吹 T = E 6% + E ^ Ia 蕴涵 E ^+ iIa = ECfcl ^* 

5. 证明，如果 S 二 （€ fc , ^ k ) l ^ k ^ n 是鞅, T 是停时，则对任何 k ^ n , 都有 


^. Cn ^{ r = fc }] = ^[^ k ^{ r = k }. * 


6•设《=(匕， ^ k ) l ^ k ^ n 与 V = ( Vk ，^ k ) l 4 k ^ n 是两个狹，其中 Cl 


= ()• 证明 


= VI 


n 


ECn^?n = E 略 — Oc 〜 l)(”k — Vk - l)j 


fc =2 


特别地，有 


n 


E ^-^ E ( e fc ~ e fc _ i ) 2 . 


k —2 


.• ,7/ n 为独立同分布随机变量序列，有 E 屮 = 0. 证明，按照如下两种方 
式所定义的序列 C == 都是鞅： 


7 . 设 




2 


fc 


exp { A (^ 十…+取)} 

( Eexp { Ar ? i}) fc 


i=l 


一 A : Er ^ 和 = 


Cfc = 
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•，7 M 为独立同分布随机变量序列，取值于（有限）集合 y . 令 My ) = 
P {7?1 = y } > 0, y e y , 而 My ) 为非负函数，有 I ： My ) = 1. 证明，如下所定 

义的序列 C = (6 c ， 滅 ) l 《 k 《 n 是鞅： 

fi ( m ) -" fi ( vk ) 

/ o ( r / l) … /o (Vk ) 7 

(变量 6 b 称为似然比，在数理统计中起着重要作用 .） 

9. 将序列 C =(匕， ^ k ) o ^ n 称为上鞅（下鞅)，如果 P - a . s . 地有 


8. 设 




yev 




= 


_ Afe* 


E(Cfc+i I ^fc) < Cfe (彡 Cfc )， o 彡 fc < 


n . 


证明，任何上鞅（下鞅）都可以（唯一地）表示为 


(+ ajfe ) 


ik = rrik — ak 


( Ofc , ^ k ) o ^ k ^ n 是这样的非降序 


( rrik , ^ fc ) o < fc^n 是鞍 5 而 


的形式，其中 

列，其中= 0,而对于所有 A ： 彡1，变量 a fc 都是 h 可 测的. 


m 


a = 


10. 设 C = fe ， 孰 )( Kfc<n 与 V = ( Vk , ^ k ) o ^ k^n 是上鞅，而 T 是关于分割 

的某个停时，并且有 P{《 T >价} = 1. 证明，按照如下两种方式“转换”而成的 
序列 C = ( a ， 都是 上鞅： 


Cfc = CfcJ(T > 釦 ） + m 1 (丁 O 


或 


Cfc = [丁 ^k) + 7] k I(r < k). 


11. 设 € =( 心， 级 k ) Q ( k ( n 是下鞅，有 


Cfc ~ iA m ， 

m^fc 


其中 G 试求该下鞅的杜布分解. 

12.设 S 二 （心， 9 k U k < n 是下鞅①，证明如下的最大不 等式： 

Ema^Cj + $ ^^(l + E(Cln + 0), 


其中 ln + x = max ( lnx , 0). 


译者注 • 


( ^ ) 原文为：设《=(匕， 
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§12. 马尔可夫链.遍历性定理.强马尔可夫性 


1•设 C = ( Co , Ci ,--* , Cn ) 为取值于 X 的马尔可夫链，/ = /( or ) ( a ： € X )为某 
个函数.试问， (/( Co ),/( Cl ), *** ? /( Cn )) 可否形成马尔可夫链？ “反向”序列 
( Cn , Cn - l ,*** } Co ) 可否为马尔可夫链？ 


2•设 P = llp ^- ll , 为随机矩阵, A 是它的一个特征值,亦即方程 det || P ~ 

1是一个特征值，而其余的根 A 2 ，…， A r 的绝对 

>0)，则有 

再证明，如果所有&，…， A r 互不相等,则转移概率 pg 


XE \\ — 0的根.证明，入1 

值都不超过 1. 在此，如果存在 n ， 使得 P " > 0 (意即所有 

| Ai | <1 ， i = 2, … 

满足关系式 


(n) 


Pij 


,广- 


Pij ^ = + a ij _ ⑵入专 + . . • + 

i ( r ) 均可通过矩阵 P 的元素来表示.（通过这样一个代 
数变换，可以得到关于马尔可夫链的渐近性质的分析,特别地，可以推出，如果 
| A 2 | < 1，…， | A r | < 1,则对每个大都存在不依赖于 < 的极限 limptf .) 

k 

3. 设$ = …， Cn ) 为具有（有限）状态空间 X 的齐次马尔可夫链，其转移概 

率矩阵为 P =|| p；cy ||. 我们记 


其中 


⑶， ... 


7Tj 7 (lij 


， 


I 祇 y 、 Px V 


T 屮 ( x ) = B [(^( Ci ) I Co = a ：； 


y 


为一步转移算子.设非负函数 p = ifiix ) 满足方程 


^(x) = ip(x )， x e X, 


亦即为“调和的”.证明，随机变量序列 


C = (Cfc) ^fc)o^fc^n 


形成鞅，其中 Cfc = = % 

4.设 e =(心， n , p ) 和 ( 匕， fi ， p ) 是两个马尔可夫链，具有不同的起始分 
布 n =如，…， Pr ) mfi = ( pu — ，烙).记 n (-) = (^ n ),... ，#))和 n ⑷= 
(#(广)， … , Pr n } ) -证明，如果 min pij > e > 0,则 


a . 


or 


m w 


J 




IX ) 

i=l 


- p \ n) < 2(1 - re ) n . 


提示: 采用数学归纳法，对 n 归纳. 

5•设 P 与 Q 为两个随机矩阵.证明， PQ 和 aP + (1 - a)Q 也是随机矩阵，其中 

0 ^ a ^ 1. 
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6. 我们来考察齐次马尔可夫链（&，&，••• ,Cn), 其状态空间为 X = {0,1}, 转移概 
率矩阵为 




1 — a 

IS I-IS 

其中 0< a < l , 0 〈卢 <1■令 = Co + Ci + ■ * • + Cn • 推广樣莫弗普拉斯定 
理(第 6 节)，证明 


a 


S n 


n 




a +/3 


龟⑷， 


P 


彡 X 


n —^ oo - 


na/3(2 —a—/3) 
~~ (a+ 泛 ) 3 


并 验证： 如果 a + 卢 = 1，而且&， G ，• • • ， Cn 相互独立，则上述表达式演变为 


S n 


— an 


^( x ) 


P 


彡 X 


ft ― > OO. 


y / na 0 


7 •设…， 6 v 为相互独立的伯努利随机变量序列，有 Pfe = 1} = p {6 
—1} = 1/2. 定义 T /0 二 &， T/n 二 

( a ) 序列 ( m . Vir - , Vn ) 是否为马尔可夫链？ 

( b ) 如果令 Co =心 ， Cn = Cn — lCn ， 1彡 n 彡 iV ， 那么序列（(0, Cl ， …， Ov ) 是 

否为马尔可夫链？ 

8. 设&，•.. ， X n 为独立同分布随机变量，将它们排为非降变列（即按非降顺序排 
列),得到顺序（秩序）统计量 A ⑻,… ， 4 n ) . (即 min { X u ... , X n },... , 
Xi n ) = maxpi ，…， X n }. 如果有 二… 

u < … < 4, 则以足 i 作为这种约定亦在其他场合下被采用，可参阅第 
二章第8节第19题 .） 

尽管不 ，…，忍相互独立，它们的顺序统计量 X { n ) ，…，尤以却是相依的. 
证明，如果不 一 共只取两个不同的可能值，则它们的顺序统计量形成马尔 
可夫链.并举例说明，当足可取三个不同值时，这一结论未必成立.（我们指出， 
如果足 的分布连续，则变差序列恒为马尔可夫链，参阅第二章第3节 .） 


= 


Cn — 1 +C 


试问: 


2 


min { Xi ,.-. , X n } ®, 而 


— 






①原 文为： 如果有 Xi 


译者注. 


…= Xi k = min{Xi, … ， Xk} 
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[0，1]}为 [0,1] 上的有理数集， w 为代数，其中的每个集合都 

是有限个互不相交的如下形式的集合 A 的和 ： {r : a < r < 6}, {r : a < 

6}, {r : a < r bj , {r : a 彡 r 彡 6}, 而 P ( A ) = b 

集合的有限可加函数，但不是可数可加的. 

2. 设 Q 为某个可数集，多为它的子集的全体.令 ^( A ) = 0,如果 A 为有限子集; 

如果 A 为无限子集.证明， M 为有限可加的，但不是可数可加的. 

3. 设 / i 为饵多）上的可数可加的测度,证明， 

⑷如果 A n T 4则 fi ( A n ) T m ㈤ . 

( b ) 如果人 i A ， 并且对某个 fc ， 有 ii { A k ) < oo , M fi ( A n ) i / i ⑷. 

( c ) 如果为有限测度 ( At ( O ) < oo )， 而 A = lim A n , 意即 A = W n - 
，贝! 1 P ⑷二 lim / i ( A n ). 

(进一步的讨论见第15题 •） 

提示：利用表达式 


1. 设 Q = {r : 


T e 


r < 


证明， P ( A)，A G W 是 


— fl * 


fi(A) 


oo 




limAn — un^ 


n u 4 


linii 4 


n=lfc=n 
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4. 验证对称差的下列 性质 : 


{AAB)AC^AA(BAC), 
(AAB)A(BAC) = AAC, 
AAB = C ^ A = B AC, 


5. 证明，按照如下方式定义的 “ 距离 ” pKA ， 扔和 p 2 (A, B) 满足三角形不 等式 : 


Pl (AB)^P(AAB), 

P{A A B) 
P(AUB ) ， 


如果 P(A U B) / 0, 
如 1 果 P(A U 丑 ）= 0, 


p 2 (A, B)= 


0 


其中是集合 4 与 B 的对称差 . 

提示： 利用包含关系 AACQ(AAB)U(BAC). 

6. ® /i 为代数崖上的有限 $ 加测度，集合先 , A 2 ，... e W 两两不交，且 A = 

证明，"⑷ > E n(Ai). 

i— 1 i=l 

7. 证明， 


= lim sup A n} 

lim inf A n C lim sup A ni lim sup (A n U B n ) = lim sup A n U lim sup B n ^ 
lim inf (A n n B n ) = liminf D lim inf B ny 

lim sup A n n lim inf B n C lim sup(A n PI B n ) C lim sup A n n lim sup B n . 


lim sup A n — lim inf A 


lim inf A 


如果 a t a 或八 a a 则 


lim inf A n — lim sup A n . 


8 • 设 （〜） 为实数列，人 =(-oo,x n ). 证明，在 a: = lim sup x n 与 A = lim sup A n 
之间存在关系 (-ex), x) C AC (-oo,ic]. ( 换言之 , A 等于 (-oo’a;) 或 (- 00 , a;].) 

9 •设也，也 ，… 为集合 Q 的子集序列 . 证明， 


limsup(A n \A n+ i) = limsup(A n+1 \A n ) = (lim sup A n ) \ (lim inf A n ). 

10 . 试举例说明，对于可以取值 +oo 的测度，一般来说，不能由它的可数可加性推出 

它在空集 0 处的连续性 . 

11 •设 木 ， … ，为多中的某些事件 . 称该事件组为可 交换的 (exchangeable 或 

interchangeable) , 如果对任何 1 彡 Z 彡 n 和任何 1 < ii <…< h 彡 n ， 都有 
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p« n-.-n^) 彼此相同 （ = 灼 ). 证明，对于这样的事件组，有如下的（容斥 ) 
公式成立（试与第一章第 1 节第 12 题作比 较)： 




^ nP 2 + ^ nP 3 -+ (— l ) n Pn - 


P 


= npi — 


i=l 


12 .设 (A k ) k>1 为可交换事件的无穷序列，亦即对任何 n > 1 ，任何数组 l^h< 

• 门 ^) 彼此相同 (= pi), 证明， 

/ OO 

(Ul!34n) = P (门 Ai 

\t=l 

/ OO 

(I^L4„) = P ( U A 


… ^ < n ， 都有 P(Ai 


n 


■ ■ 


p 


=lim pi 

I —►CX) 


=1 - lim (-l/A’bo) 


P 


其中 p 0 = 1, A 1 ^) =p n +l —Pn, ^ l (pn) = A 1 (A l ~ 1 (p n )) r l ^ 2. 

13 • 设 (A n ) n ^ 为某个集合序列， 1(A) 是集合 A 的示性函数 . 证明， 

(a) I (lim 儿 ) 

\ n ， 

(b) lim/(A n ) — limJ(A n ) = l(limA n \ lim 瓜 ) 

n n ^ n n ^ 

/ oo \ oo 

(c) / U A 小 E J ( 々 ). 

\n=l / n=l 


=liml (A n ) If limA n ) = limJ (A n ). 


14 . 证明 


I (An), I H 

\n=l 

15. ( 续第 3 题）设 M 为 （ Q, 多）上的可数可加的测度，证明， 

(a) udimAry ) 彡 

(b) 如果 /X 为有限测度 (MQ) < 00 )，则 


U 


A 


= min I(A n ), 


A 


max 

n^l 


n^l 


fi(limA n ) > lim/x ( 人 ） _ 


(c) 对于概率测度 （p = P )， 有（关于集合的法图引 理 ): 


P(limAi) 彡 limP (A n ) 彡 limP(A n ) 彡 P(limA n )‘ 


由此推出关于概率 P 的 “ 连续 ” 性质 2) 与 3)( 第 2 节中的定理）的推广 

如果 A = lim (即 EE A n = lim = A )， 贝！ 1 P{A) = limP(A n ). 


16^ iH A" = lim A nj = lim A n , 证明， P(A n - 0, P(A* - A n ) 

17. 设集合 A 


a 


A ( 意即 =A ^ 参阅第 16 题 ) ，证明， P(A A A n ) 


a 
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18, 设集合 A 按如下意义收敛到4 : P{A A ) h ^ A n ) = P(A A limA n ) = 0. 证 

明， P(A A A n ) 

19. 设 A G ， 杰，…与历，…都是集合的 子集. 证明，对称差满足下列 性质： 

Ao A Bq — Ao A Bq, 

[\ J B A ^ U( AoAjB n )， 

n^l 

\ 

n^-l 3 f](A 0 AB n ), 

n^l 

U 1 ^ \ J ( A n AB n l 

n 彡 1 

f| ) C [j{A n AB n y 

n>l 


0, 


n 彡 1 


A 0 A 


n 彡 1 


LM 


△ 


n 彡 1 


n 彡 1 


n An 


△ 


n 彡 1 


n^l 


20 •设为随机事件，证明 


|P(4 nB)- P{AnC)\ ^ P(BAC). 


21. 证明，对于任意三个事件和 C ， 它们之中恰好发生一个事件的概率等于 


[P(A) + P{B) + P(C)] = 2[P(AB) + P(AC) + P(BC)] + 3P(ABC). 

(试比较第一章第 1 节第 13 题 .） 

22.设是，中的某个事件序列，使得 

53 P (^n A A n+1 ) 


< 00. 


证明， 


P{(limA n ) A QMA n )} = 0. 


23. 证明，等于任何两个事件 A 和 B ， 都有 


max(P(A), P(B)) ^ P(AU B) < 2max(P ⑷， P(B)) 


和 


P{AU B)P(A n B) < P(A)P(B). 


何时等号成立? 
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24. 设（人) n > l 与 (^ n ) n ^ l 是两个事件序列，并且对每个 n > 1,都有 Ai Q 证 

{An i.o.} C {B n i.o.}. 

25. 仍设与（氏) 必 是两个事件序列，并且 


① 


P{A n i.o.} = 1, P{B n i.o.} = 0. 


证明 PWn 凡 i.o.} - 1. 


26 . 试举出两个有限测度 Mi 和 P 2 的例子（即有 /ii(O) < do, 内⑼ < 00 )， 使得满 

足条件 O 


^ /X 2 的最小测度 P 不是 max(/xi, /X 2 ), 而是 Pi + /X 2 - 


" 1 ，^ 


27. 设在可测空间 （ n ， 多）中给定了一列概率测度 P 1 t P 2, …，使得对每个 


都有 


P „ ⑷— P ⑷， 


其中 P ( A ) 是 A e 夕上的某个集合函数.试证明如下结果 （布塔尔-汗-萨克斯 

定 理)： 


(a) P = P(.) 是问多)上的概率测度. 

(b) 对于多中的任何满足条件 A k l 0 (k^oo) 的集合序列 A!,A 2 , …，都 

有 supP n (A fe ) I 0, k 00. 


28. 试在 ( M ,^( M )) 上构造一列测度 Mn = fJ ^ n ( A ), A G ^( M ), n > 1, 使得对于每个 

A e 頌] R ), 序列 ( fj , n ( A)) n ^i 都是下降的，然而 u ( A ) = lim / i n ( A ), A e 廣 ( IR ), 却 

不具有可数可加性,从而不是测度， " 

29 •设供多, P ) 为概率空间， ( A n ) n ^ 为一列事件.设 P ( A n ) > c > 0, n 彡1，及 

A = lim . 证明 P ( A ) > c . 

30. (惠更斯 问题) A , B 二人轮流抛掷一对殼子.如果 A 在 B 抛出7点之前抛出6 

点，则 A 鼠否则就是 B 臝.如果 A 先开始,试求他赢的概率 Pa . ^ 

提示：以4表 7 K A 在第 k + 1 次抛掷时取胜的事件,则有 Pa = P (^- fe )* 

(本题答案 为：」 Pa = 30/61.) 

31. 设 Q 为由至多可数个元素构成的集合，多为它的子集形成的某个 a - 代数.证 

明， 一^ 定存在 一 '个 分割货={£>1，1?2, ， .. } ( U 认= fl , Di O Dj = 0, < •和 

iV = {1， 2, … })， 使得夢可由颂生成: 


fe— 0 


ieN 


u A 




M CN}. 


iEM 


(试与第一章第 1 节第 3 小节关于有限集合 n 情形下的断言作比较 .) 

译者注. 


® i.o •表 7 TI 无限多次 （infinitely often) 
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提示： 可以通过在 n 中考察由如下的等价关系 “ c ^ 
来构造迓： • * 


所形成的等价类 




CJ2 


^ A 对于每个 A e ，}• 


Cc；i 〜 Ct?2 


§2. 代数和 a - 代数.可测空间 


1•设岛与馮是空间 Q 的子集的两个 a - 代数. 试问： 如下两个集合类是否也是 


代数: 


CT- 


n 3^2 — ： ^ ^ 且 -A g 潘 2 }, 
U E {A •• A G 或乂 £ *^ 2 }? 


设岛 V 爲是由 a - 代数岛和爲中的集合所张成的最小 a - 代数 a { m u 爲). 
证明，岛 V 潘 2 重合于由所有 形如历 H 丑 2 的集合所生成的 a - 代数，其中迅 

潘1而 B 2 G 涿 

提示: 验证0溪 2 是 a - 代数，举例说明不是 a - 代数.（设空间 Q 
为一个3点集，即可构造出所需的例子 .） 

2.设货= { D 1) D 2 , … } 是 f 2 的某个可数分割，而潘= a ( 贷).试问 a - 代数激的 

势为多少？ 


G 


2- 


提示： 可以确认^代数涿具有连续统的势，因为可以把集合 

巧 2 U …，其中 而二 0或1 ( 若而= 0,则 Df -： 0，而若而=1,则= A ) 

视为由0和1所构成的序列 


U 


(工1，3：2,…），这类序列的全体具有连续统的势. 


X — 


3. 证明 


^(E n )(83^(E) = ^(E n+1 ). 

4. 证明，集合 （ b ) 〜 （ f ) (参阅第4小节）属于激 ( E °°). 

提示： 为了证明，例如,性质 （ b )， 应当指出 


卜 nu 门 { 


x : < a + 


x : lim x n ^ a 


k 


(换言之， 1$ x n ^ a \/ k e N , 彐 meiV : 当 n 彡 m 时，有； c n < a +|_) 类 

似可证性逢⑷〜 ( f ). 

5. 证明，集合 A 2 与戌（参阅第5小节）不属于 

提示： 与证明 集合先 的情形类似,关于也与乂 3 的证明也采用反证法. 

6. 证明，函数 （18) 事实上给出了一个测度. 

7. 证明，爲(，）=溪 ( ET)，n > 1，并且爲(肢沈）= 


§ 2 . 代数和 a - 代数.可测空间 
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8.设 C = C [0, oo ) 为定义在 t 彡0上的所有连续函数 


( t ) 的空间.证明，关于 


X = X 


距离 


咖， y ) = E 2 


mini sup \ x t - y t \, 1), x y y G C , 


该空间（与 c = C [0，1] 一样）是一个 波利希空间，亦即可分完备的距离空间 ，并 

且由它的所有开集所生成的 a - 代数爲 ( C ) 重合于由所有的柱集所生成的 a - 代 
数翊. 

9. 证明，条件组 {( A a ),( A 6 ),( A c )} 与条件组 {( A a ) ; ( A ；),( A ^)} 相互等价（参阅《概 
率》第一卷第二章第2节定义2与注 2). 

10 . 试由定理 1 推出定理2.① 

11. 证明，定理3的证明过程中的系义是 A - 系，③ 

12 . 称 a - 代数是“可数生成的”或者“可分的”，如果它是某个可数的集合类所生成 


的. 


( a ) 证明 ， Q = [0, 1] 的博雷尔子集的 a - 代数溪是可数生成的. 

( b ) 作为例子,证明，两个 a - 代数 岛与多 2可能如 此：岛 C 為，而多2为 
可数生成，但爲却不是可数生成的. 

13. 证明，为了 cl - 代数淨是可数生成的，必须且只需，对于某个随机变量 X ，有 

淨= a ( X ) { a ( X ) 的定义见第4节第4小节). 

14. 证明， ( X u X 2 r -) 为独立随机变量族，如果对于每个 n > 1，都有 a ( X „) 与 

, X n _ i ) 独立. 

15•设 （ Q , 多， P ) 为完备的概率空间（参阅第3节第1小节和第34题)，淨是多 

的子 a - 代数（淨 [ 多).而 （☆)¥ 是多的非升的子 a -代 数序列（负3 < r 2 3 

n ^ l ). 假设所有的子 a - 代数都已经被多中的 P 测度为0的集 
合完备化了的.那么，乍一看来，似乎应当有如下的关系式（至少精确到零测集) 


① 《概 率》 第一卷第二章第2节中的定理1为 ：如果 W 是代数，则有 


MOO = CT ⑷， 


其中 11(^) 是包含 W 的最小单调类. 此处要求利用这一定理，证明如下结论： 

⑷ 任何 tt - A -系 #都是 a - 代数. 

( b ) 如果#是集合的 7 T - 系， 则有 入⑷ = d { S ) = O 

( c ) 如果#是集合的 7 T - 系，而义是 A - 系，使得 d 则有 cr ( S ) C ^ f —— 

②定理3为 ：设# 是多中的集合所成的 7 T - 系，而東是这样的一些多-可测的实值函数所成的 

集合，有： （ hi) 如果 A e A 则 /a e 東； （ h2) 如果 / e h e 龙， 则 / + /I e Jf 7 ; ( h 3) 如果 

h n n ^ l , h 丁 \ 则那么在龙中包含了所有 CT ⑷-可测的有界实值函数. 在该定 

理证明中构造了集合类 Jf ={ AeJ ^： Ia e 灰}， 此处要求证明幺是 A- 系 


译者注 . 


译者注. 
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成立: 


rv (爹乂 ) 


爹， fK - 


(*) 


= (7 


或者表示为 


H (爹 V 齓) 


门 # n ， 


=沴 V 


** 


其中爹 V A E a (^, 40是由贫和焱中的集合所生成的最小 a - 代数；任何 
两个完备化了的属于多中的 a - 代数米与爲（精确到零测集）的相等, 是指: 
对于每个 AeM . 都能找到某个 BeM (反之,对于每个 B e ^都能找到 
某个 A e 爲)，使得 P{A A S ) - 0. 

然而，下面的来自 [22] 的例子却表明，事实并非如此，一般来说，取上运算 
( V )与取交运算 （ n ) 是不能交换的. 

⑷设^0^1,6, ••- 为独立伯努利随机变量，有 pfe = 1} = p {6 = -1} 
1/2.令 ••乂 n ， 以及 




爹 = cr(Ci 』 2 , …）， 4 = cr(Xk, k > n). 


证明，在这里有 


「|a (爹，爹， . 


提示： 验证，随机变量匕是关于 f \ a 队 d a ( W “ 0 )) 可测的,但同时 
却与 M 淨， f) n 40 (= 中的事件独立.（进一步的讨论见第七章第 4 节第25 


题 .) 


( b ) 对于 a - 代数的取上运算（ V )与取交运算 （ n ) 的不可交换性，可以（不依 
赖于⑷中的断言）更为简单地直接推出（参阅[131以设^与&如⑷中的随 
机变量（即相互独立的对称的伯努利随机变量)，而 A = ^(6), 4 = afe ), ^ = 

贝 ! I 


(爹 v 爲 ） n (爹 v 釣）笋爹 v (负 n 度 2 )且（淨 n < fi ) v (爹 n 爲）笋爹 n (尚 v 鬲) • 


16 •设 M 与忒是两个相互独立的集合类，并且都是 7 T - M . 证明， a ( M ) 与 a (^ 2 ) 

也是相互独立的.试举出两个相互独立的非 7 T - 系的集合类的例子，对于它们， 
a ( M ) 与 a (^ 2 ) 不相互独立. 

17. 设义是 7 T - 系，证明， { A,B Af]B = 0) 

18. 设岛与為是 D 中的子集的两个 a - 代数.令 


{AuBe^f), 


=> 


(i (多 1 ，多 2) = 4 


\ P ( A 1 A 2 )- P ( A l ) P ( A 2 )\. 


sup 
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证明，这个用来刻画岛与為之间的相关程度的变量具有下列 性质： 

( a ) Q ^ d(^ u 多 2 ) O ‘ 

(b) d (罵 ，多 2 ) = 0 当且仅当岛与為相互独立. 

( C ) d (岛 ，多 2) = 1当且仅当 巧与多 2的交中含有概率等于1/2的事件. 

19. 利用定理1的证明方法，证明，包含集 合类# 的 A - 系 A ⑹和 7 T - 系 7 T ⑷的存 

在性与唯一性. 

20. 设 W 是_的某个代数，具有性质：任何不交的集合序列 ( A n ) n>u 只要4 

崖，就有0 证明， W 是 t 代数. 

n— 1 

2 1 •设 (^ n ) n ^ l 是上升的 a •代数序列，即多 n g 夂 +1 ， 71^1. 证明，^久（一般 

来说，仅仅只能）是代数. n==1 

22. 设多是代数（或 &代 数)，集合 C 不属于多.我们来考察由多中的集合和集 

合 C 所生成的最小代数（相应的, 〜代 数).证明，该代数（相应的, a - 代数）由形 
如 （A n (7) u (P n C ) 的集合构成，其中 A , B e 多. 

23. 设 1 = EU{-oo}U{oo} 是增 广数轴直线 . 博雷尔 cr- 代数 ^(1) 可以定义为由所 

有形如 [-oo, x ] (x e M) 的集合所生成的 CT - 代数，其中 [-oo,x] = {-oo}U(—oo,x] 

(试与第 2 小节中的定义相比较).证明，该 a - 代数涿 (S) 亦重合于下列任何一 
个集合类所生成的 a - 代数： 

(a) [― cx), x), a: G R ， 或 

(b) (a;,oo], x 其中 （ a: ， oo] = (a:, —oo) U {oo}, 或 

(c) 所有有界区间， {—oo} 和 {oo}. 

24. 考察可测空间 （ C ， 風 ( C ))， 其中 C = qo , 1] 是全体连续函数 a : = { x t ), t e [0,1] 

的集合，而 潘 Q ( C ) 是由关于距离 p { x , y ) = sup \ x t - Vt \ 的开集所生成的博雷 


€ 




0<t<l 


尔集合类. 


(a) 证明，空间 ( C ^ 0 ( C )) 是完备的. 

( b ) 证明，空间 ( C ^ 0 ( C )) 是可分的. 

提示： 为了证明此处的结论，考察伯恩斯坦多项式是有益的，参阅第一章第 


5节. 


(c) 证明，由可导函数构成的子空间 C dif [0,1] cC [0, l ] 不是 C [0,1] 中的博雷 


尔集 ■ 


25. 设鸿是 Q 中的某个（非空的）子集类.证明，由该子集类生成的代数 a (^ 0 ) 可 

以按照如下方式构造出来. 

令 M =成 u { n ， 0}，而对于 n > 1,令 


= {A U B : A, B € ^n}' 
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则有 M c • •. c J24 c . - ^ 和 


^(*^)) = *^n* 


n=X 


26. 如果滅是 Q 中的某个（非空的）子集类,则第 25 题已经给出如何构造出由滅 

所生成的（最小）代数 a ( M )) 的具体办法. 

现在我们按照类似的步骤定义下列集 合类： 


M = M ) u { 0 , 0 }， 


^2 = M U < IJ B n : Bi, - 

\ n=l 

— [ oo 

— ^2 ^ {B ： B G ^ = ^3 U < U : 丑 1 ，召 2 ， "€«^3 卜 

I n— 1 J 

u {B : B G — { U J 3 n : Si , S2 , ■ • * 6 i , 






可能会认为集合类 成 


= u 就是由集合类為所生成的（最小） a - 代数. 

然而却并非如此，事实上，来说，虽然恒有武 c g a ( M ))， 但是却有成 C 兴 
a (滅),这就是说，由上述步骤未必就能得到^代数 a ( M )). 试举出例子，说明存 
在 a (^ 0 ) (严格）大于尤的情况 - 

提示： 可以将数轴 M 上的所有区间的类取为滅 . 

我们还需指出，即使由 I 出发，再按照上述步骤做下去，一般来说，也不 
能得到 a ( j ^ o )- 为了最终得到 cr (^ o ), 必须进行超限归纳 （ Ni “次”)；关于康托尔 
基数（势）〜，连续统的势 e 以及连续统假设的势 (C=M) 参阅 [79] 第一卷，第 
235 页，或第二卷，第 1068 页. 


27. 上一题中的构造和结论都表明， a - 代数的结构可以是非常复杂的.勒贝格曾经 

认为 “ M 2 中的任何博雷尔集 B 在坐标轴之一上的投影一定是 R 1 中的博雷尔 
集”. 1916 年，苏斯林给出了一个反例，推翻了这一命题.试尝试构造一个相应 
的反例. 


提示： 苏斯林指出，对于平面上的某些具体的开集序列杰， A 2 ，…，它们的 
交 flAn 在坐标轴之一上的投影不是博雷尔集. 

28. (施佩纳引理）设 A 二{1，.. . ， n } 是含有 n 个元素的集合，{々，…，是 A 中 

的这样一些子集的族，其中任何一者都不是任何别者的子集.证明，这种子集的 
数目 k 满足不等式 k < d n/ ' 

设#是 D 中的某个子集类，夕二 a ⑹是设 所生成的最小 a - 代数.设 A €多. 
试利用恰当集合原理，证明，可以从 S 中挑出一个可数子类（记为貧)，使得 

A e «). 

30. 在距离空间 p ) (以 p 为距离）中，博雷尔集合的 a - 代数# 定义为由所有 


29, 
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开集的类所生成的 a - 代数（参阅第三章第1节第3小节).证明，对于某些距离 
空间，由所有开“球”的类所生成的^代数说严格地小于 C ^). 

31. 证明，不存在具有可数个元素的势为阿列夫零心的 a - 代数(其势与全体自然数 

的势相等).事实上，在 a - 代数的结构中，或者仅有有限个元素（参阅第一章第1 
节第10题)，或者必具有不可数的势.根据下 一题， ET 中的全体博雷尔集合的 
势为连续统的势 c = 2〜(即对于自然数集的全体子集的势). 

32. 设 c = 2〜为连续统的势.证明，全体博雷尔集合的势为 c , 而全体勒贝格集合 

的 a - 代数的势为 2 e . 

33. 设忍为赋有勒贝格测度 A 的数轴直线上的博雷尔集.将如下的极限称为集合 

B 的 密度： 


A {B n [- T , T }} 


D { B )= lim 


(*) 


2 T 


(假定该极限存在). 

⑷举例说明，存在集合 B ， 其密度 D ( B ) 没有定义 （(*) 式中的极限不存 


在). 


( b ) 证明，对于互不相交的博雷尔集合执和氏，有 


D { B 1 + B 2 ) = D ( Si ) + D { B 2 ). 


( c ) 举例说明，存在互不相交的博雷尔集合序 列私， 执，…，它们都有密度, 
但是却（意外地）有 




D 


i=l 


i=l 


34 . (&代 数的完备化） 设⑴ ，恳 p ) 为概率空间.我们说该空间是 完备的 （或 p 完 

备的，或关于测度 P 是完备的)，如果由 B G 萝并且 P (^) - 0可以推出所有 
集合 ACB 都属 于多. 

以，表示 D 的所有这样的子集 iV 的类，对于每个这样的集合 iV ， 都能找 
到一个（自己的）集合 B N G ，, 有 P ( B n ) = 0 , 使得 N QB N . 令 W (通常也写 
为多 p 或歹 P ) 为所有形如 AUN 的集合的类，其中 A €多，而 iV e 


证明， 


⑷歹是 a - 代数. 

( b ) 如果 Bcn ^ 并且存在多中的集 合山和 乂 2 ,使得 A^BC A 2 , 以 
及 P ( A 2 \ A 1 ) - 0 ,则有 BeW . 

( c ) 概 率空间歹, P ) 是完 备的. 
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§3. 在可测空间上建立概率测度的方法 


1.设 F ( x )= P (- oo , x ]. 试证明下列各式的正 确性: 


P(a, 6] = F(b) - F(a), P(a, b) = F(b~) - F(a), 

P[a, b] = F ⑻一 F(a -), P[a, b) = F(b—) — F(a-), 

P ( W ) = F ( x )~ F ( x ~), 


其中 F ( x -) - limF ( y ). 

2. 试验证公式 （7) 的正确性 

3. 证明定理2.② 

4. 证明， M 上的分布函数 F = F ( x ) 至多有可数个间断点，而对于，上的分布函 

数，可能有怎样的相应结论？ ^ 

提示:利用事实 { xeR : F ( x ) ^ F { x ~)} = 0 {工:尸 ㈤ — F ( x ~) > i }. 

而对于 ， （n > 2) 上的分布函数，间断点集合具数的势的结论已经不再成 
立.作为例子，可观察& 测度： 


1，如果0 e A 
0，如果0賓 


S 0 (A ) 二 


A G ^(W l ). 


5. 证明，如下两个函数都是右连续，并且对每个变元是上 升的， 但却都不是 1 R 2 中 
的（广义）分布 函数： 


1, X + x/ > 0, 


G(x, y) = 


0 ， ： r + y < 0, 


G(x, y) =： [x + ?/] } BP x + y 的整数部分. 


①此处所要证明的⑺ 式是: 


b± * * * (工 1 ， • • * ，工 Ti ) = P ( a ， fc] ， 

X ( a ni 6 n ], 而 F n 0 r 1} …，: r n ) 是，中的分布函数，且 


其中 （ a , &] = ( ai ， & 1 ] 


x 


* * * 


△ a ‘ fe ‘ (工 1，工 n ) = 1 ，♦’*，$《一 15 5工 i +1 ，… * ，工 n ) — Fn (工1 ， * • . ， — 1 ? ，工 i +1，*’ - ， 3 Jn ) 


——译者注. 

③ 此处所要证明的定理 2 是:设 F = F n ( xi r . ■ j n ) 是肢 n 中 的分布函数，则在 （ R n ， 潘 ( R n )) 中 

存在唯一的概率测度 P , 使得 


P(flLj b — * - * ^ a n b n (^1 ， • • * ，工 n ) 


译者注. 
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6. 设 p 是某个连续的广义分布函数所导出的勒贝格-斯蒂尔切斯测度.证明，如果 
A 为至多可数集,则有 fx { A ) = 0. 

7. 证明，区间[0，1]上的康托尔集 A / ■是不 可数的完备集 （即为闭的，同时又稠密于 

自己的，或者说没有孤立点的集合)，但是在区间[0，1]中却无处稠密，并且它的 
勒贝格测度为 0. 

8 . 设（0,多, P ) 为概率空间， W 为 n 的子集的代数， 使得多 • = a (^). 试利用适 
当集合原理,证明,对任何 e > 0和任何集合 Bd 都存在集合 A e e W ， 使得 

P ( A e AB )^ e . 

提示： 令逖 -：{B e 多 ： V e > 0, 3 Ae ^： P { AAB ) ^ e }, 证明涿是 

CT - 代数，从而 ^0^0 Cr (^) = 

9 . 设 P 为 （ M ' ^{ R n )) 中的概率 测度. 证明，对任何£ > 0和 B G ^( M n ), 都可 

以找到紧集 Ai 和开集也，使得 Ai C . B C . A2 , 并且 P ( A 2 \ A]J < ( 这 一 "事实 

在定理3的证明中曾经用到 

提示：考察集合类 

Be 砜 ，）： Ve > 0,存在 紧集山 和开集也， 

并且 A 2 的闭包 Z 2 为紧集，使得次 g B g A 2 和 P ( A 2 \ A x ) ^ 

证明潘是 CT - 代数. 

验证根据公式 Pr ( B ) = P (^ r ( B )) (定理 4 , 公式 (21)) 所构造出的测度族 { P T } 
的相容性,其中 P 为给定的概率测度. 

11. 试验证《概率》第一卷第二章第3节中的表2和表3中所列入的“分布”都是 

真正的概率分布. 

12. 证明，第1小节注2中的类/是 a - 代数. 

13. 证明，第1小节注2中所引人的集合函数 p ⑷， Agj ^ 是测度， 

14. 试举例说明，如果测度 / i G 在代数 W 上是有限可加的（但不是可数可加的)，则 

它不可能扩展为 a ㈤ 上的可数可加的测度. 

15. 证明，任何在 Q 的子集的代数 i 上给出的有限可加的概率测度都可以扩展为 

0的所有子集上的有限可加的概率. 

16. 设 P 是 D 的子集的 a - 代数多上的概率测度.设集合 C 7 g 仏但卩贫多.证明, 

测度 P 可以扩展到由多中的集合与 （7 所生成的 a - 代数 a (多， C ) 上（并保持 
其可数可加性). 

17. 证明，连续分布函数 F 的支撑 supp F 是完备集（定义见第7题). 

注： M 上的分布函数 F 的支撑 supp F 定义为满足如下条件的最小闭集 
G : fi ( W \ G ) = 0,其中 / x 是与分布函数 F 相应的 测度; 亦可参阅附录第2节. 
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试举出 suppF ^ M , 即以整个实数轴为支撑的离散分布函数 F 的例子. 

18. 试证明如下的关于分布函数结构的基本结果（参阅第1小节末 尾)： 每个分布函 

数都可以表示为如下形式 


F = a 1 F d + a 2 F Ahc + a 3 F sc , 


其中％彡0， 

F d 是离散的分布函数（在某些点 ar fc 处的跃度为 Pfc > 0): 


Oil + = 1 ， 


E 


Fd = 


Pk ； 


{fc: *} 


F abc 是绝对连续的分布函数: 




F a bc = 


— oo 


其中（密度） / = / ⑷是非负的博雷尔函数，勒贝格可积，并且 f ( t)dt = l; 


— oo 


F sc 是奇异的分布函数,亦即连续的分布函数，但是其增长点集合的勒贝格 


测度为 0. 


关于所述的表达式的唯一性问题有何说法? 


19. ( a ) 证明，每个数[0, 1] 都可以表示为（三进制）形式 


3 n ， 


UJ 


其中 a ; n e {0， l ,2}， n > 1. 

( b ) 证明，如果 o ； 有两个表达式£ 

,则有 


和£尝，并且它们都是无限级数 

-n — 1 tJ 

> i ( 无限级数表达式的唯一 


UJ 


3 n 


El 


E K 


= OO 


UJ 


col , n 


to 


性). 


我们指出，当 o ; 具有有限级数表达式 g ^时,表达方式可以不唯一，此 

种场合下可以按照如下方式选择“典则” ^方式： 

1) 如果 6(； = 5^ 


- 2 


a ; 


,则可令 


3 n 3 m 


n ^ m — 1, 


UJ 


2, 


a ; 


n = m 




0, 


n > m + 1; 
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i J _ 
3 n 3 m 


2) 如果 


, 则可令 


a ; 


n ^ m — 1, 


OJ 




o , 


U 


n = m . 


2, 


n > m + L 


( c ) 证明，区间 [0,1] 上的康托尔函数（康托尔函数是典型的奇异分布函数 
的 例子; 对它的描述见《概率》第一卷第二章第3节第1小节）的增长点集合 
M 中的每个 a ; 都可以表示为 形式： 


E ^n 

3 n ， 


u = 


其中 w e {0, 2}，7 x > l . 

注： 有趣的是,如果考察康托尔集合 AT 中的点^的十进制表达式，则一共 

只有14个数（参阅 [118]) 具有有限的级数表达式,它 们是： 


1 3 1 3 7 9 1 3 9 13 27 31 37 39 
4 5 4 ? 10 5 10' 10" 10' 40 T 40 , 4 D " 40 1 40 ? 40 ? 40 ? 40' 


20 . 设 AT 是区间 [0,1] 上的康托尔集. 

⑷证明, AT 的势与区间 [0,1] 的势相同. 

( b ) TV * ㊉ JV " 与 J\fQM 分别等于什么（其中 Y ㊉ JV * = { a ;+ a / : uj e uj f e J \ f }, 


而 J\f 0 J\f = — io f ; oj G - A /", oj f € A /"})? 


21. 设 C 是 1 R 中的闭集.试构造一个分布函数 F , 使得 supp F = C , 

22. 试给出 （ M , 激 ( E )) 中的一个 a 有限的测度的例子， 使得： 

( a ) 它不是勒贝格蒂尔切斯测度，换言之,对于它不存在非降右连续函数 
(广义分布函数 ）G = G ( x ), 使得 jlx ( KH ) = G ( b )- G ⑷’ a < b . 

( b ) 它不是局部有限的，换言之，对于任何 xeR y 它在 or 的任何开邻域中 
的测度都是无限的. 

23. 试构造出区间[0，1]中的一个集合,使得它不属于勒贝格集合类虿(丨0，1]). 


24. (关于黎曼 C 函数欧拉公式的概率证明） 设 C ( a ) = — 为黎曼 C 函数 （1 

< oo ), 欧拉公式断言，满足如下的关 系式： n_1 

K ⑷卜奠(4)， 

其中 PuP 2 r - 为大于1的素数序列.试证明这一结论. 
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a 
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提示： 令 N 二 {1，2，...丨为自然数集，将它的子集的博雷尔 a - 代数记为 2 n 
(试比较《概率》第一卷第一章第1节第3小节末尾关于 N 一) 的表示方式). 
在 （ N ，2 n ) 上对子集 ACN 定义概率测度 P = P ㈠ 为 

p ⑷， 


n£A 


设 A ( Pi ) = {内，^，…}为所有可被素数仍整除的自然数 neN 的集合. 


证明， 


( a ) P (^( pO ) ~ Pi a - 

(b) 事件 A { Pl ), 咖)， …相互独立. 

( c ) f | A ( Pt ) = I 1 }- 

I ~1 

接 1% 再考虑如下问 题：由 （ b) 可知，事件 ： 5( Pl ) ， l(p 2 ), …也相互独立.因 
此，由 （ c ) 和 （ a ) 可以推出，一方面 


p|A( Pi ) =P({i}) = [C(a )]- 1 ； 


p 


另一^方面，又有 


n 3 ㈤ 卜 nt 1 - p ( A (Pi))\ = n 1 


p 


p ? j ’ 


此即为所证. 

25. (关于不超过给定数的素数数目的欧拉公式的概率证明）设 ip ( n ) 为欧拉函数，即 

满足条件1 < P < n 的素数 p 的个数.试从概率的角度，证明如下的欧拉 公式: 


沪 (n) 


(其中 p 1 ^表示 p 可整除 n ). 

提示：在集合{1，…， n } 上定义离散的概率分布 P ({ A :}) = 1/ n , 1 ^ k ^ n . 
对于固定的 n , 令 A ⑼=< n : p 整除 fc }, 并设 pi ， p2 , …为可以整除 n 
的互不相同的素数.证明 

( a ) P ( A ( Pl ))= p -\ 

( b ) 事件 A ( pi ), A ( p 2 ), --- 相互独立. 

( c ) n A ( p ) 就是集合 {k ^ n : 为素数 }- 

然; I # 断言 


p (■卜 nC 

\p I n / p j n p I n 


cp(n) 


P 




P 
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26. 证明，（，， M { R n )) 上的勒贝格测度，在 

是旋转不变的. 

27. 举例说明，在卡拉泰奥多里定理中关于集合类 W 是代数的假设，对于将 W 上 

所给定的概率测度 P 拓广到 a - 代数多= a (^) 上的可能性及唯一性来说，都 
是本质的.意即， 

⑷构造一个空间 D 和它的子集类#与濟， 其中# 不是代数，而多= a (#); 
并且在#上给出一个这样的概率测度 P ， 它不能拓广到^代数多上. 

( b ) 构造一个空间0和它的子集类#与多，其中多= a (^); 并且在 cr - 代 
数多上给出两个概率测度 P 与 Q , 它们在#上的局限（亦即 P | #与 Q | A 
参见第4小节）彼此重合. 

提示： ⑷取 Q = {1,2,3}. 令# = { 0 , {1}, {1,2}, {1,3}，叫，而夕为 Q 的 

所有子集所构成的 a - 代数.再令 P (0) = P ({1,2}) = P ({1 t 3}) = 1, P ({1}) 

1/2, P ⑻ = 0. 

( b ) 只需取 n = {1,2,3,4}. 并且令 # = {{1,2}, {1,3}}, 而多为 n 的所有 
子集所构成的 cr - 代数.再令 P ({2}) = P ({4}) = 1/2, Q ({2}) = Q ({3}) = 1/2. 

28. 设 F = F(x), xeR 为分布函数.证明，对于一切 a ^ 0, 都有 


1时是平移不变的，而在 n > 2时 


71 






[ F(x + a ) — F ( x)]dx = a . 


R 


29. 在对于分布函数 F ( x ) 的密度函数 f { x ) {x e R ) 的定义中，仅要求它是非负函 

数、黎曼可积,使得 F ( x )= f 有时（例如，当知道它仅仅黎曼可积，而 

一 OO 

非勒贝格可积时）并不假定它是博雷尔可测的. 

试举出一个函数 /( x ) 的例子，它非博雷尔可测，但却是分布函数（在所述 

的意义下）的密度函数，并且还能够（按照公式 J f ( x ) I B ( x ) dx ) 在数轴 

M 中的博雷尔集合 B 上给出概率测度. °° 

提示:区间 [0,1] 上所有博雷尔集合的类具有连续统的势 c ， 而所有勒贝格 
集合的类的势为 V (参阅第2节第32题).由此可知，如果 A /* 是区间 [0,1] 上 
的康托尔集,则可找到集合 I ? £ [1/2,1]门见它不是博雷尔集合，但却有勒贝格 
测度 0. 进而再确认，函数/( I ) = 2/ [1/2 , 1] xd ( x ) 不是博雷尔可测的，然而黎曼可 
积，积分//⑷ is ( x ) dx 确定并且给岀了区间 [0,1] 中的博雷尔集的概率测度. 

30. 试举出实直线 1R 中的两个集合 d 与 B 的例子，它们都是勒贝格零测集，然而 

却有 A ㊉ S 

设 •^是 Q 的子集的某个代数，多= a ( s ^). 设 / x 是多上的 a - 有限的测度.证 


31 


明 


( a ) 测度^在 W 上可能不是 a - 有限的. 
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( b ) 如果测度 m 在¥上是^有限的，则第8题中的相应结论亦可成立，即 

的 B e 多，都能找到人 e <使得 


对一^切 e > 0 和所有满足条件 


< oo 


fi ( A E △ J 5) < e . 

( c ) 如果测度 M 在 ¥ 上不是^有限的,则性质 （ b ) 可能不被满足. 

32. 证明，溪 ( M n )) 上的任何概率测度 M 都是在如下意义下正 则的： 对任何 

Be 潘 ( IT ), 都有 


UDB . U 为开集}， 


K B ) = 

KB ) = sup {^( F ) : FCB, F 为闭集 }. 


证明，对一切博雷尔集 B e 頌 M n ), 都有 

MB) = sup{fx(K) : KCB, K 为紧集 }• 


33. (贝特朗悖论）众所周知的由贝特朗提出的“经典”悖论很好地解释了这样的道 

理： 在解答概率问题时（尤其是在解答几何概型问 题时， 贝特朗悖论就是关于 一 
个几何概型问题的)，应当明晰地描述概率模型，准确地确定诸如“侥幸地选取 
的点”，“随机地选取的对象”之类的语句所表述的意思.（在第一章第1节第17 
题的提示中也谈到了这一点 .） 

贝特朗在他所著的教科书 [8] 中所提出的问题，以及它的由不同解法所得 
到的不同结论（其中包括“悖论”）都告诉 我们： 当概率试验具有无限多个不同 
的可能结果时,原则上是不能对某些事件的概率问题给出确定的回答的. 

贝特朗所提出的问题 如下： 在半径为 r 的圆中“以随机的方式”⑼选取一 
条两个端点 A 和 B 都位于圆周上的弦试问，这条“随机选取”的弦乂 B 
的长度 \ AB \ 小于 r 的概率是多少？ 

我们来陈述关于这个问题的三种不同的可能 表述： 

( a ) 将“以随机的方式选取弦 AB - 理解为依照圆周上的均勻分布相互独立 
地选取端点 A 和 R 

试证明,在关于问题的这种理解之下，我们所求的概率 P a {| AB | <r} = 1/3. 
(固定点 A ， 并考察边长为 r 的圆内接正六边形，它的一个顶点重合于点 A .) 

( b ) 每一条弦 AB 都被由圆心向其所作的垂线的垂足 M 所完全决定.把 
“以随机的方式选取弦 AB ^ 理解为点 M 服从圆内的均勻分布. 

试证明，在关于问题的这种理解之下，我们所求的概率 P b {|A 丑 | < r } = 1/4. 
(验证事件 {\ AB \ < r } 重合于如下事 件:点 M 位于两个半径分别为 r * 和 r ^/3/4 
的同心圆所夹的环中 

( c ) 弦的长度与其方向无关,而仅仅取决于它与圆心的距离.由此自然 
可以假定它们的方向相同，例如都平行于水平方向的直径 C 7 D , 而它们与竖直方 
向的（与 CD 垂直的）直径五 F 的交点 M 服从上的均勻分布. 
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试证明，在关于问题的这种理解之下，所求的概率为 




P C {\AB\ < r } = 1 - 


(« 0.13). 


2 


(应当验证事件 {\AB\ < r} 重合于事件 {\OM\ > ,}，其中 \OM\ 是圆心 O 到 
点 M 的距离 .） 

34. (m 33题续）上题中针对不同的概率问题所给出的不同解答都是对的.如果我 

们以两个参数 p 和0来刻画弦，其中 p 是圆心 O 到点 Af (由圆心0向弦所作 
的垂线的垂足）的距离，而0是弦与某个固定的方向所形成的夹角.于是, 
如果假定 r - 1,那么对于长度 \AB\ > 0的弦就有0 < p 彡1， 0^6 <2n. 

试证明，在上题中所考察的三种场合 （ a )，( b ) 与 （ c ) 之下， （ p , 0的联合分布 
的密度函数分别为 


P 


Pb(py = & Pc(P ，. 


p&(p ，e) — 




2 丌 2 ^/1 — p 2 


(由此即可明白，并无什么“悖论”存在，因为对“随机地选择一弦” 一词可以赋 
予不同的概率意义 

35 . 设（尤 /i) 为赋予了可数可加的测度的可测空间（足文)(参阅第 1 节定 

义 5 和定义 6). 

将可测集乂称为（相对于测度的）原子或者原子，如果 M (A) > 0,并 
且对于任何可测集 B ， 都或有 /x(d nB) = 0, 或有 fi(A\B) = 0. 测度/ X 称为原 
子的，如果任何 / x 测度为正的可测集都包含着原子. 

测度 M 称为非原子的，如果不存在 斤 原子. 

测度 M 称为弥漫的，如果单点集都是可测的，并且 M 测度都为 0. 

试分别给出原子的、非原子的、弥漫的测度的例子,并给出同时为原子的和 
弥漫的测度的例子. 

证明，原子的与非原子的测度之和可能是原子的. 

36. 设 P 与 f 是⑼熏）中的两个概率测度，现知对任何满足不等式 P (^) ^ 1/2的 

多 中的集合 A 都有 P ( A ) = P ( A ). 证明，对一切 A € 多，都有 P (^4)= P (^). 


§4. 随机变量 I 


1. 证明，随机变量 e 连续，当且仅当，对任何 : r € IR ， 都有 P{C = x } = 0. 

2. 如果旧是多可测的， 那么纟 是否也一定是，可测的？ 

3. 证明，函数 

的.证明进一步的 结论: 任何连续函数/ = / ㈤ ， xeE 都是博雷尔的. 


= — min ( x , 0), \ x \ = x + - x ~ 都是博雷尔 


= max(x ， 0 )， 
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提示: 对任何 aeE , 考察开集 { a ; e R ，/( a ;) < a }, 并利用第2节第7题的 


结论- 

4. 证明，如果《与 7? 都是,可测的，则仏? ： ^(u?) = Tj ( u )} e 

5. 设 e 与是 （ a 多）上的两个随机变量，集合 A e 多.证明，如下的函数也是随 
机 变量： 


C(W) = ^{uj)Ia + 

6. 设心，…，^为随机变量，而 : x n ) 为博雷尔函数.证明，函数 
… , CnH ) 也是随机变量. 

提示： 首先证明，如下的映射是 ^/^( R n ) 可 测的： 


(Ci ⑼，…， G M 71 . 


a ; 


，…，心— )） 是复合可测映射. 

7•设€与7?是两个取值于 1，…， N 的随机变量.假设巧=证明，存在 
数 （1, …， iV ) 的一个排列 ( hr - Jn ). 使得对于每个 j = h …， N ' 都有集合 

{ a ; ; ^ = j } 与集合 {oj : r } = ij } 相互重合- 

提示： 利用定理3,根据该定理，可以找到函数#与也使得《=^⑹与 
V = 攸).再证明 ， ij =分⑴就是所求的排列， 

8. 举例说明,存在这样的随机变量$它的分布函数具有密度函数 /( x ), 但是 ^lim 
f ( x ) 不存在，由此 /( or ) 在无穷远处并不零化. 

9. 设€与7/是两个有界的随机变量 （16 彡 Cl ， M 彡 C 2 ). 证明，如果对于一切 
m,n > 1,都有 


再证明 


UJ 


ECr) n = E ^ m - E ?? n , 


则《与 7? 相互独立. 

10. 设€与7/是两个随机变量，它们的分布函数巧与^相同.证明，如果对于 

a : e M ， 有 { a ; : C (^) — x } 0 ,则存在 P e R , 使得 { a ? : C (^) ~ x } = {lo : 

咖） =y}. 

11 . 设五是 ir 的至多可数的子集， $ 为 n — e 的映射.证明 乂是… ，夕）上的随 

机变量，当且仅当，对每个 xeE^Wn { UJ ： ⑽ = x } e ^. 

12. 设€是随机变量，有 PR ^ 0} > 0. 假设对于某两个数 a 和6,随机变量 a ? 与岐 

同分布 ( F a ^( x ) = F k { x ), xeR ). 试问，是否必有 a -6? 如果假设 a > 0, fc > 0, 

那么命题自身是否成立？ 

设⑴ ，忒 P ) 是概率空间，而 ㈨ ,歹 P ， P ) 是⑴，濟, P ) 对测度 P 的完备化(参 
阅本书第2节第34题，亦可见《概率》第一卷第二章第3节第1小节的注 1). 


13. 
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设 f = f ( a ；) 是 （ Q , # P , P ) 上的随机变量 • 证明，存在 （ Q ， 濟, P ) 上的随机变量 
e = CM , 使得 PU ^ - 0. 换言之，《与$仅在某个零概集上不相等. 

14.设 （ 是随机变量， B 是 1 R 中的博雷尔集.证明 


(^l^eB)) = r 1 (B)na(0. 


15. 设…为相互独立的区间队1]上均匀分布的随机变量.令 ^4(0；) 为丨 0,1] 

上的由值所形成的集合，其中 a ; e a 证明，对于几乎一切 
en , 集合都在区间 [ o ， i ] 中稠密. 

16•设6，&，…为相互独立的伯努利随机变量，有 Pfe - 1} = P {? 

1/2, k ^ h 我们来考察随机游动 { S n } n ^ 其中％ = 0, S n ^ 6+** *+匕， n ^ l . 

令 ao = inf{n > 0 : 5^ = 0} 为0时刻之后首次回归0点的时刻（如同惯 

例，当相应的集合 {•} 为空集时，令 


Cl ； 


- i } = 




k 


oo). 


C^O 




证明 


2 n 


2 n 


Cd 


Cd 


而 P{ao = 2 n } = 


P { cr 0 > 2 n } = C2 n 


°2 n 


2 n - 1 


再运用斯特林公式，验证，当 n 充分大时，有 


而 P{(7 0 = 2n} 


P{ao > 2 n } 


r^j 


"lyJUn^i 2 


\rjrn 


(试比较第一章第 10 节中关于叱和 / 2 fc 的表达式).（由所得到的公式推知 

P { a 0 < 00 } = 1 ，并且 E 吋 < oo 当且仅当 a < 1 / 2 ;试比较第一章第 9 节中的 
结果 .） 

17. 在上 一 '题中的条件下，令 fJfc = inf{n > 1 : S n — / a }, = 1,2, … . 证明 


k 


P{afc = n } = — P {*9 n = fc }， 


这就意味着有 


G ) 


k 


P{f7fc = 打 } = ~f^ Tl 

18 .设 $ = CW ) 为非退化随机变量，使得对于常数 a > 0和6,随机变量< + 6的分 

布与$的分布相同.证明，此时必有 

19•设 心与心 为两个可交换的随机变量 （意即 （心义2)与 (6 ,$1 ) 同分 布).证明， 如 

果/ = / ㈤ 和 g = p ( aO 都是非负的非降函数，则有 


1 和 b = 0. 


a = 


E/ ⑸沒 ⑸> E/ ⑸戒 2). 
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20. (针对定理 2) 设^2,…为（取值于 M ) 的随机变量序列.证明 

B = { uj ; lim & 存在且有限 } €多. 


提示： 利用 S 的如下表达方式: 


B = { lim ^ > - oo } D { lim^ n < oo } D { lim - lim^ n = 0}. 

21 . 设…为独立随机变量序列，服从共同的非退化的连续分布.设 4 烏,… 

为一列事件，其中皋=%而对于 n > 2,有 

对*~~'切 ？ Tl < Tl }. 

(事件‘可以视为在时刻 n 产生“新记录”的事件 .） 证明，事件烏，…相 
互独立，并且 P ( A n ) = 1/ n , n ^ l . 

22. 设$与 q 是随机变量，其中 q 的分布律 Law ⑹绝对连续（即其分布函数％是 

绝对连续函数).证明， 

( a ) 如果 f 与 T ] 相互独立，则分布律 Law ($ + T}) 也是绝对连续的. 

( b ) 如果$与 T ] 不相互独立 } 则分布律 Law (^ + V ) 可能不是绝对连续的. 

23. 设$与 n 是相互独立的随机变量,其中$为离散的，而 tj 为奇异的（即巧是离 

散的分布函数 ，巧 是奇异连续的分布函数).证明，随机变量 f + T ) 的概率分布 
F ^ + v 是奇异的. 

24 . 设多)是可测空间，并且 a - 代数多是某个(可数)分割贷= {£>!, D 2 , … } (参 

阅《概率》第一卷第二章第2节第1小节）所可数生成的.证明， a - 代数多重 
合于如下的随机变量所生成的 a - 代数多^ 




x (^) = ^2 


10 


其中 ^(0) - 3, <^(1) = 5. 

25. ( a ) 设随机变量 X 具有对称的分布（即 Law ( X)=Law (- X )). 证明， 

Law ( X ) = Law (^ F ), 

其中€与 y 为相互独立的随机变量，有 PU = 1} = PR 二 = 1/2,而 Law 

( y )= Law (| X |). 

( b ) 设 f 与 Y 为相互独立的随机变量，有 P {$ = 1} = PR = -1} = 1/2. 证 
明， C 与斤相互独立，当且仅当， 1" 具有对称的分布（即 Law ( F )- Law (- F )). 

26. 设随机变量 X 取两个值 a；i 和 : r 2 ( 并且 n 一別)，随机变量 F 取两个值 yi 和 

妁(并且 yi /妁).证明，如果 cov(X,F) = 0, 则 X 与 F 相互独立. 
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27.设为独立随机变量序列，均服从区间[0，1]上的均匀分布，并且对于 

0 < x < 1，有 


r ( a :) = min {n ^ 1 : + •••+&> 工}. 


证明， P{r(x) > n} = x n / nl，n ^ 1. 

28 .设 Xi , X 2 , X 3 为独立同分布随机变量,具有指数密度/卜）= e ~ x I(x > 0). 定义 

X 1 + x 2 + x 3 ’ 




= <Xi + * x *2 + 义3 * 


r 2 = 


Vi 


x 1 + x 2 , 

证明，随机变量 Yi , F 2 ， F 3 相互独立. 

29.设&与 X 2 为相互独立的随机变量，分别服从自由度为 n 和 r * 2 的 x 2 分布（参 

阅第8节 （34) 式和第3节表 3). 证明，随机变量 Yi = X l / X 2 与 Y 2 = A + 

相互独立（试比较第13节中的39和42题结论). 


§5. 随机元 


1.设…，^为离散随机变量.证明，它们相互独立,当且仅当对任何 


工 1 ， ••• ？工 n! 


都有 


} = J^JP{Ci = Xi}. 




A 


X 


• * • 


2. 试证明,一切随机函数 X ( oj )= (^)) ter 都是（定义3意义下的）随机过程，反 
之亦然. 


提示： 如果 X = 是多7謂 E T ) 可测函数，则对 f € 了和 J 5 €潘 ( M )， 


都有 


\u) \ ^ 5 } = {oj \ G C7 } ^^ 


€ B }. 反过来，只需考察形如 {x :〜€执， 


其中 C ^{ xeR T 

B n } 的集合 C e ^( M T ), 其中迅，… ，凡 e m { R ). 该种集合显然属于炎 


J X t n € 


: x t 


■ _ * 


3.设 A ，…， A 分别为取值于（玢，负)，…，(& 〆 „)的随机元.又设（與，釣)， 
…为 n 个可测空间，而仍，…，如分别为釣/<，…, ^ n /^ n 可测的 
函数.证明，如果&，… ，及 相互独立，则随机元贝 o A ，…，恥 o 亦相互 
独立，其中 gioXi^giiXil i = l ， … 

提示： 只需证明，对任何 玖 G <①， i = 1，…， n ， 都有 


, n . 


P (5 i (^ i ) ^ g n ( X n ) eB n }= P { X ! e .•- , X n G 

译者注. 


书为：对任何执 i = i ? 


n 




) 
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4. 设 A ，；^, …为可交换随机变量的无限序列（亦即， fc 个脚标不同的随机变量, 
例如，…，的联合分布仅仅与有关，而与 h ，…，4的具体选取无关， 
试比较第1节第11题 .） 证明，如果 BXl < oo , n 彡1，则 cov ( X !, X 2) ^0. 

提示: 利用可交换性假设,可以用前两个矩和协方差表示 D 再在 

考察该极限. 1=1 


其中令 

5•设匕，… ，6 n 与 m ， …，如为随机变量，记随机向量 X = (匕 ，… j m ) 与 F 
( T / i , …，加) . 假设如下各条件成立： 

( i ) 随机变量 匕… 相互独立. 

( ii ) 随机变量 ”1，… 

( iii ) 随机向量 X 与 F ， 作为分别取值于与的随机元,也相互独立. 
证明，此时随机变量心，……，加相互独立. 

6. 给定随机向量 X = (&，…，与 Y =(爪, • • • ,7] n ), 现知随机变量6, ■•- 

是相互独立的. 

( a ) 证明，随机向量叉与 y 作为随机元是相互独立的（试比较上述第5题). 

( b ) 令 / : M 

6n) 与 g ( Vir " ^ n ) 相互独立. 

7 •设⑴，多）为可测空间，而 （五 ，必 P ) 为以 P 为距离的距离空间，#是由其中的 
所有开集所生成的代数（参阅第2节).设&(0；)，义 2 …)，…为 多18 可测的 
函数序列（随机元)，使得对一切 coen , 都存在极限 


n — 00 , 


相互独立. 


: rjn 


仉，… ，加 


为博雷尔函数.证明，随机变量/(6,…， 


> M ，分： 


M 


X(uj)= lim X n (aj). 


证明，极限函数 X ( oj ) 亦是 ^/ S 可测的. 

8•设（1，6,…为独立同分布随机变量序列，多 n = 0-(^1, ••- ,^ n ), 彡1，而 T ( W ) 
为（相对于停时.令 


^]n(^) — ^n-f t(cj) (^)* 


证明，序列（爪，你…）与序列 H ..) 同分布 • 


§6. 勒贝格积分.数学期望 


1. 证明⑹式. 


提 示:设 5为非负简单函数 s 的集合. i \\^ se { seS ： s <化而 (^Wi 
是简单随机变量序列，有 T €，则有 max($ n , s) H 与 Es < Emax (匕， s), 由 
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Es < EC . 反过来的不等式可以由的结构直接 


此可知 Es < EC 和 


sup 

{^€ S : s ^} 


得到. 


2. 试证明关于性质 E 的如下 推广： 设$与 n 是随机变量，对于它们， E 《与 Et ] 是 

或 -00 + 00), 贝!1 


确定的，而且表达式 E $ + Et | 也有意义（即不具有形式 


oo — oo 


有 


E($ + 17) = + E”. 


提示： 正如证明性质 e 本身那样，需要考察由表达式《 = - r 和 n 二 
r 所引发的各种可能情况.例如， 如果玫 + 

证明（或反证）亦有 eg + ”)+ = 

3. 试推广性质 G ， 即证明，如果 h ( a . S .)， 而 EC 存在，则吻也存在，并且有 

Eq = Ef 

4. 设$为广义随机变量， / x 为 a - 有限测度，有 fj ⑽ 

旧 < oo (^ i ~ a . s .). (试比较性质 J .) 

5. 设"为 a - 有限测度，《与”均为广义随机变量，使得 ㈣ 与 Jr } dfi 都有定义. 

那么，只要对所有 Ae ^ 都有不等式//咖< r ] 咖成立,就有 f < r / (/ x - a . s .)- 

(试比较性质 I .) 

6•设 f 与 r ? 为相互独立的非负随机变量 • 证明， E 0 = • Ei 

提示： 现将 f 与??换为这样的简单随机变量^与 加， 其中 Cn T 《， 加 T T ). 
由定理6知 E^nVn = E^n - E ^ n . 再利用单调收敛定理即可. 

7 , 利用法图引理,证明 


则（在相应的条件下) 


= oo , 


1 


oo . 


证明，此时必有 


< oo . 


P (limAJ < limP (A n ), P (limil n ) ^ limP (^4 n ). 


8. 举例说明，在控制收敛定理中，条件 “| 匕 | % E ?] < oo ”， 一般来说，是不能削弱 


的. 


提示: 令0 = [0,1]，多=潘 ([0, 1 ])， P 为勒贝格测度.考察随机变量 

~ nl(uj ^ 1/rz), I. 

9. 举例说明，在法图引理中，条件 “| 匕 | ^ r } , E V >- 

10 . 证明法图引理的如下表述方式的正确性. • 如果随机变量族 ( C +, 1} 一致可 

积，则有 


般来说，不能取消. 


OO ， 


lim E Cn ^ Elim ^ n . 


提示： 利用 性质： 对任给的 e > 0,可以找到 C > 0,使得对所有 n 彡1，都有 

( Cn 〉€)<£• 
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11 . 定义在区间 [0,1] 上的狄利克雷函数 


1, ^为有理数， 

0, X 为无理数 

是勒贝格可积的，但不是黎曼可积的.为什么？ 

12. 举例说明，存在定义在区间[0，1]上的黎曼可积的函数序列 {( fn ) n ^ lh 其中 

l / nl ^ l , 并且依勒贝格测度几乎处有/„ — /，但是/却非黎曼可积. 

提示： 考察函数列 f n ( x ) = f ：/ { , i } (^) 5 其中{仍 ，必， …}是区间[0，1]中的 
有理数集. 

13 •设{叫； i，j > 1} 为实数族，有乙1叫| < oo . 试由富比尼定理推出 


d ( x ) = 


^ j 3 


= ai 3 = Y 1 * 


(*) 


3 


3 




• • ，使得 = h 并且在 n-N = { i ,2,...} 
上定义概率测度 P 为 P ( A ) = E Pi . 然义函数 fihj ) = ^：, 并指出 

i€A 3 

|/( o ; 1 ， o ; 2 )| cf(P X P ) = E \f{hj)\PiPj = 


提示： 任取一列正数 


Pl,P2, ■ 


< oo . 


QxQ 


i，j 


h 3 


最后再利用富比尼定理. 

14. 举例说明，存在这样的实数族 { a ij; i，j > 1}, 有 EKI = oo , 使得第13题中的 

(*) 式不成立. 

提示 ：考察 


^3 


0, 


a ij = 


H” ， i^3- 

15. 由简单函数出发，利用关于勒贝格积分的积分号下取极限的定理，证明如下的 

关于 积分换 元法结论的正确性. 

设 h = h ( y ) 为区间上的非降的连续可微函数，而 /( x ) 是区间[/ I ⑷， 
h ( b )} 上的（按勒贝格测度）可积的函数.则函数 f ( h ( y )) h f ( y ) 在区间 [ aj 上可 
积，并且 




b 


f { h { y ) W { y ) dy . 

提示： 首先证明该式对博雷尔集合的示性函数及其线性组合成立.再利用 
单调收敛定理，证明该式对非负（可积）函数 /( a :) 成立，最后利用表达式/二 
/+-/_，证明其对任意（可积）函数/⑻成立 • 


f ( x)dx 


h{a) 
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16. 证明 （ 70) 式. 


提示： 令 《二-《， 那么它的分布函数为 F { x ) = 1 - F {{- x )~). 从而 


0 


J \ x \ n dF ( x ) = J \ x \ n dF ( x ). 接着再利用 （69) 式. 

一 oo 0 

17.设66,6,…为非负随机变量序列，对任何 

(即有依概率收敛 《 n 式参阅第10节). 

( a ) 作为定理5的推广，试证明，在假设 E^ n < oo , n > 1之下，有 
< oo 成立的充分必要条件是 n ^ l ] 一 致可积（换言之，如果将 以概率 

1 收 敛换为 依概率收敛， 则定理5的结论仍然成立). 

( b ) 设所有随机变量6 6,6,…都是可积的（即玫 < oo , E & < oo . n ^ l ). 


0,都有 P{\^ n - C | > e ) 


£ > 


0, 


Tl — > OO 


— > 


证明 


E|^ n — 0. 

提示 ：（ a ) 充分性可由定理4和第10节第1题推出.必要性可以类似于定 
理5的证明，只需将那里的 以概率 1 收敛 换 为依概率收敛 （当然还应参考第10 
节第1 题). ， 

( b ) 对任何 c >0, 都有 


ECn — 




El^-Cnl -( CAc)l + El(e 八 C )— (匕八 c )| + E|^n Ac )-$ n |. 


给定 e > 0,选 c > 0,使 ER - ($ Ac )|<6. (在题中的条件下）可以断言，对于充 
分大的 n ， 有 E|(f A c )- (《„ Ac )| < s 和 E|(^ n Ac ) ~^ n | ^ 3 e . 从而对于一切充 
分大的 n ， 都有 E | C -$ n | <5 e . 

18 •设纟为可积随机变量 (E|^| < oo ). 

( a ) 证明，对一切 e >0, 都存在 6>0, 使得对任何只要 P ( A ) < 6, 
就都有 E /,4^1 <e (“ 勒贝格积分的绝对连续性 ”). 

( b ) 试由 （ a ) 推出：如果 ( A n ) n>1 是一列事件，有 _lim P ( A n ) = 0 ? 则有 
E (⑽ n )) — 0, 

提示： 利用《概率》第一卷第二章第6节引理 2. 

注： 试比较此处的断言 （ b ) 和定理3中的断言. 

19. 设 fT ], C 与匕,1心，为满足如下条件的随机变量（参阅第17题中关于 

依概率收敛的定 义)： 


n — > oo * 


Cn L Vn — V ， Cn^C ” n ^ ^ Cn ； ^ ^ 1? 

ECn Ef} n Er ), 

并且 Ef Et ], E (:均 有限. 证明，此时有如下各断言（普拉特 ( Pratt ) 引理） 成立: 

⑷ Ef n — Ef • 
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( b ) 如果还有条件 Vn ^ O ^ C n 成立,那么就还有 E |& - $ 

并由此推出，如果之$ E |€„| ^ E |《| 及 E | f | < 00,则 E|^ n — —> 0•(试 
比较第17题的断言 ( b ).) 

举例说明，如果去掉 （ b ) 中的补充条件，就可能会有 E |^ - C | />0. 

提示： 如果引入辅助随机变量 

0 ， $n ~ ~ f]ny Cn = Cri — 与 ^ = 0, ^ = ^ ~ T ), C ~ C 

则会有0 < 匕笃 C 和 EC „ — EC . 所以由第17题中的断言 （ a ), 随机变量族 
{ Cn , n ^ l } 一， 可积. 又由 fO <Jn < Cn , 所以 { fn ，n ^ 1} 也一致可积.由此 
即得 E & 4 Ef (并且还有 E | f n - $ 4 0). 再由条件 E 加4 En 推得 E & 4 Ef 

20. 证明， W 彡 L */, 而如果函数/有界，并且测度 M 有限，则 L */ = 1*/ (参阅第 

11小节注 2). 

21. 证明，对于有界函数/，数学期望 E / = L */ (参阅第11小节注 2). 

22. 证明第11小节注2中的最后一个结论. 

23. 设 F = F ( x ) 是随机变量 X 的分布函数.证明 

( a ) E \ X\<oo 

( b ) EX + < 

提示： ㈨ 证明如下关 系式： 


0 . 


— > 


^}n 










fL n^)dx < oo 并且 / 0 °°(1- F ( x))d 
J^°ln < oo , 对某个 a > 0. 




X < oo . 


oo <=> 


B [ XI{X > a )} 彡 


E [ XI{X > a )], a>a 


In 


dx 《 


厂⑻ 


JF ⑷ 


24. 证明，如果 p > 0,并且 lim xPP {| e | > x } - 0, 则对任何 0 < r < p 都有 

有可能- oo . 

25. 试举例说明,存在这样的密度函数 f ( x ), 它不是偶函数，但是所有的奇数阶矩全 

都为0: /: o x k f { x)dx = 0, A ： = 1,3, ■ * -. 

26. 试举例说明，存在这样的随机变量$ 


E|^| r < oo . 试举例说明，对于 


= J ) 


彡1，对其有 

OO 

e E ^^ E e ^* 


71 


n ? 


27. 设随机变量 X 具有性质：对任何 a > 1，都有 


P {| X | > an } 


0, 


n oo . 


P {1 X 1 > n } 


证明， X 的任意阶矩都存在. 

提示： 利用公式 


EK = AT 


N—l 


P {| X | > x } dx , N ^ l . 


x 


0 
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28•设 X 为随机变量，分别以概率抛取值= 0,1，2,….函数 


G ( s ) = Es x = ^ 


k 


， kK 1 


PkS 


fc =0 


称为叉的母函数.（关于母函数的详细讨论见第3节附录 .） 试验证如下各 公式: 

( a ) 如果 X 为泊松随机变量，亦即有= e ~ x X k / k \, 其中 A > 0, = 

0,1，2, - • • ，那么 


一 A(l—s) 


X 


G { s ) = Es 

( b ) 如果 X 为具有几何分布的随机变量，亦即有 Pfc = M fc ， 其中0 < p < 
1， q ~ I — p 7 A ; = 0,1，2, • * * 5 男 P 么 




=e 


P 


x 


G { s ) = Es 


s ^ L 


sq 


( c ) 如果不，…，为独立同分布的随机变量，有 P { X 1 -1}= P , P { X 1 = 
0} — q (q = l — p ), 则有 


g(s) = (p S + g r = , 


fe =0 


这表明 r { X 1 + ...+ x n = fc } = C ^ p k q n ~ k . 


2 9 •设 X 为取值于集合 {0,1,2,.--} 的随机变量，而 G ( s ) = EZoPkS k , 其中 Pfc = 

P{X = k }, fe >0. 

对正整数 r ®， 证明 

( a ) 如果 EX r < oo , 则阶乘矩 E ( X) r = EX{X 一 l ) … （X — r + 1) < 00 ,并 


且 E { X) r = lim ( s ) (- G ( r )( l ))， 其中 G ⑺ ( s ) 是 G ( s ) 的第 r * 阶导数. 

( b ) 如果 S EX r = 00 ,则 E ( X) r 


并且 lim G ( r )( s )= 

s ― ►l 


00 


00 . 


30 .设 X 为离散随机变量，服从集合{0,1， …， n } 中的均匀分布，意即 P{X = k } = 

，再求出 EX 和 EX 2 , 然后推出 


先证明 G ( s ) - 


， fc = 0,1， .. • 

众所周知的恒等式 


， n . 


n+l 1—s 


n+1 


n(n + 1) 


n(n + l )(2 n + 1) 




E fc2 


2 


6 


fe=l 


fc=l 


31. (第一章第 1 节第 13 题续）设表，…， An 为某些事件（未必相互独立) ，足 = 

仏 ， i = l ， …， n ， 而 E n -/^+-.-+/^ n . 证明，母函数 G^ n ( s ) = Es ^ 由下式 
给出: 


也(和;(卜 ir ， 


译者注. 


①原 书为： r^l 
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其中 


P(4n 〜 rU im ) 


E P 队 


1，…人 =1} 


s m = 






l^tl <* f 


1 彡 彡几 


(参阅第一章第 1 节第12题).并由此推出，事 件心二 {5^ = m } 的概率由下 
式给出： 


P ( B m ) = ^(- l ) fe - m cr 5 fe . 

k=rrt 

提示: 利用 也 ( s ) = E ft (1 + X 办 -1)) 和 

1=1 

n n n 

n ( i 刪卜 i ) 卜 i + e x “ s - i )+ yi 〜足“卜 i ) 2 +...+ n 灿 - 1 )' 




32. 与母函数 一样， 在众多场合起着有益作用的另一个概念是矩母 函数： M(s) = 

(在此自然需要假设 Be sX < oo). (需要指出 的是： 如果 X 是非负随机变 
量，而 A > 0,则对 s = - A ， 函数 F(X) = M (- A ) (= Ee~ xx ) 并非别的，而恰恰 
是以 _F = F(x) 为分布函数的随机变量 X 的拉普拉斯变换.） 

( a ) 证明，如果存在某个 a >0, 使得矩母函数 M(s) 对所有 s e [- a , a ] 都有 
定义， 则对一切 k = 1,2,■■-,函数 M(s) 在 s ：- 0处的阶导数 M ⑻ ( s ) 都存 
在，并且 


sX 


Ee 


M ㈨ (0) = EX fe . 


(正是这一性质使得人们将 M(s) 称为矩母函数 .） 

( b ) 举例说明，存在随机变量，它对于任何 s > 0,都有 M(s) 

( c ) 证明，若 X 为参数为 A > 0的泊松随机变量，则对一切 s € M ， 都有 


OO . 




- A ( l - e s ) 


M(s) = 


e 


( d ) 试举出两个相互独立的随机变量 X 与 y 的例子,对于它们，矩母函数 
Mx + y ( s ) = Ee s(x+y) 是矩母函数 M x { s ) = Ee sX 与 M Y { s ) = Ee sV 的乘积. 


33. 设0 < r < oo , X n G L r , X n ^ X . 则如下三条件相互等价（试比较第17题与 

第19 题)： 


( i ) 随机变量族 {| X n | r , n > 1} 一致可积. 

( ii ) X n ^X (BP E \ X n - X\ r -^0). 

( iii ) E \ X n \ r ^ E | X| r < 


DO. 


34. (斯 皮策 ( Spitzer ) 恒等式) 设…为独立同分布随机变量 ，有 E | Xx | < 

令& 二為 + …十％， ,5 fe ), k ^ l . 证明， 对任何 n 彡 1， 


OO. 


都有 


fe=l 


(*) 


EM n = 
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其中扣 " = max (0, 5 fe ). 

文献 [101] 中的提示：利用关系式 


M n = I ( S n > 0) M n + I ( S n ^ 0) M n , 

E [/(5 n > 0) M n ] = E [ I ( S n > 0)不] + E [/(5 n > 0) M n _!； 

E [ I ( S n > 0)^] = 


n 


即可依次得到 


(占 ES U 戰 - 2 ) 


EM n = —ESJ + EAf n _i = - ES + + 


n 


n 


5^ES fc + + EM 1= X^ES fc +. 


fc =2 


fe=l 


注： 关系式 （*) 可以通过对更为广泛的斯皮策等式中的变量*求导来 得到: 
对一切0 < U < 1，有 


u k Eie itMk = exp J ^-Ee 

fe=0 v fe=l 


itSf 


对于该关系式的证明比直接证明 （*) 更难. 


35. 设私= 0, & = Xi +…+ n > 1,为简单对称随机游动（参阅第八章第8 

a = min {n > 0 : S n ^ 0}. 证明 


节)，而 


Emin(cr ， 2m) = 2E|52m| = 4mP{52 m = 0}, m^O. 


36 .⑷设 X 为标准高斯随机变量 （ X 〜 M (0,1)). 利用分部积分证明， EX k 

(k 一 l ) EX k - 2 , d 并由此导出公式 （fc > 1) 


= 0， EX 2k = 1-3 


2 fe —1 


{2 k - 3)(2 fc - 1) {= (2 k - l )\\). 


EX 


( b ) 证明，如果随机变量 X 服从参数卢=1的伽玛分布(见第 3 节表 3 )，则 


有 


T(k + a ) 


k 


EX 


， fc > L 


r ⑹ 


特别地 ， EX = a ， EX 2 = a(a + 1)， 因而 ， BX = 

试对 $ /1 的情形，找出相应的公式. 

( c ) 证明，如果随机变量 X 服从贝塔分布（见第3节表 3 )，则有 


a . 


B{r + k , s ) 


k 


BX 


k ^ l . 


聊， s ) 
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37. 设函数 


— 2wic^2 


《一1， a ；2) 


—UJIUJ2 


u；l € n! = [1 ， 00 )， Ct；2 € r^2 = (0, !]• 


-2e 


e 




证明 


( a ) 对每个 u ; 2 , 函数 ^{ uj u UJ 2 ) 关于叫 e n ! (勒贝格）可积， 

( b ) 对每个 cJi ， 函数 UJ2 ) 关于 u ；2 € Q2 (勒贝格）可积， 
但是富比尼定理不成立. 


38. 证 明莱维 ( B . Levy ) 定理： 设随机变量…可积(对一切 d 有 E |^„| 

)， supE & < 00 ,并且 H ; 则随机变量之亦可积，并且 E & T Ef (试比较 

定理 la ). 

39. 证明法图引理的另一表述 形式： 如果0彡^ $ ( P - a . s .) } 且< A 

00 , n > 1. 则随机变量$亦可积，且 E 《彡儿 

40. (关于勒贝格可积性与黎曼可积性之间的关系）设博雷 尔函数/ == /( x ), x e E 

关于勒贝格测度 A 可积 （J \f(x)\X(dx) < 00). 证明，对于任何 e > 0,都可以找 




< 


oo 


< 


R 


到 


⑷阶梯函数 f e (x) = ⑷， 使得/ I /⑻- fe{x)\X(dx) < e , 其中 

次均为有限区间； 

( b ) 支撑有限的连续函数 g £ ( x ), 使得 J |/(4 一 g £ ( x )\ X ( dx ) < 

41. 证明，如果《是可积的随机变量，则 




R 




R 


0 


乂 P{^ > x}dx - I 


P {《 < x } dx . 


E ^ = 


再证明，对任何 a > 0,都有 


E > a )} = 


P {^ > x}dx + aP {^ > a } 


而若 O 0,则还有 


E [⑽ < a )] 


P{x < ^ ^ a } dx . 


0 


42 •设 € 与 r ? 都是可积的随机变量.证明 


[ P { y ? < x ^ — P {《 < x ^ r )}\ dx . 


- E77 = 


43.设$是非负随机变量0)，其拉普拉斯变换为 F(X)= Ee _' A 彡 0. 


L 
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⑷证明，对一切0 < r < 1，都有 


1 一 ^( A ) 


r 


Er - 


d \. 


A r+1 


r(i - r ) 

提示：利用关系式：对于3^0, 0< r < l ， 有 


0 


— S 入 


— e 


- r(i 一 r ) 


d \. 


S 


A r+1 


r 


0 


( b ) 证明，对一切 r > 0,都有 


F(X r )d\. 


—r 


EC 


rT ( r ) 


0 


提示:利用关系式：对于 s > 0, r > 0,有 


r 


exp {—( A / s ) r } dA . 


s 


r ( l / r ) 


0 


44. ( a ) 证明，第 7 小节中的赫尔德 ( Holder ) 不等式 （29) 中的等号成立，当且仅当， 

与 | r ^ 线性相关，亦即存在均不为0的常数 a 和使得 a | e|P = b\ V \ 


9 


( P - a . s .). 


( b ) 证明， 1 < p < oo 时的闵可夫斯基不等式 （31) 中的等号成立，当且仅当， 
对某均不为0的常数 a 和6,有畎= ㈣ ( P - a . s .). 

( c ) 证明，柯西-布尼亚科夫斯基不等式 （24) 中的等号成立，当且仅当 j 与 
线性相关 ( P - a . s .), 亦即存在均不为0的常数 a 和使得 < =的 ( P - a . s .). 


V 


设 X 为随机变量，有？{。<义彡&} = 1，其中 a ,6 eE , a < b . 记 m = EX , 
BX . 证明， a 2 ^( m ~ a )( b - m ) } 并且等号成立，当且仅当 P{X = a } + P{X 
6 } = 1 . 

46•设 X 为随机变量，有 E \ X \ < 00 . 证明 

⑷如果 X >0 ( P - a . s .)， 则 


2 


45. 


<7 




ElnX ^ In EX , E ( XlnX ) ^ EX In EX 


E X ^ EX 


(0 • InO = 0)* 

( b ) 如果随机变量 X 的值属于区间 [ a ， 6 ]，其中0 < a < & < 00 ,则有 


2 


(a + 6) 


1 ^ ^jJC * E~r ^ 


Aab 


X 


并说明何时等号成立. 

( c ) 如果 X 为正值随机变量，且 EX 2 < DO, 则有如下估计式（佩利-济格蒙 
德不等式）成立：对0 < A < 1 


2 


( EX ) 


2 


P{X > AEX } ^ (1 - A ) 


EX 2 • 
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⑷如果对给定的 w > 0,存在 c ^ O , 使得 P{X < u } < c , 则对任何 r > 0, 




都有 


U 


EX r 彡 


t (cEx 2 r y / 2 

1 — -- 


EX 


(假定分母有意义并且非 0). 

( e ) 证明，如果 X 为非负随机变量，则有 


2 


( EX ) 


P{X > 0} 彡 

4 7.设$为随机变量，有驭= m 和 Eg - m ) 2 = a 2 . 证明坎泰利不等式 


EX 2 • 


2 


㈣ 




<7 


>e} ? P{C 




e > 0 


— m < 


m 


max 


( j 2 + e 2 . 


2 


2(7 


p(ie 




£ > 0 - 


m 


a 2 + e 2 


48 •设 € 为随机变量，有 E 闷 < oo , 而 g = p ( x ) 为 R 上的严格下凸的函数.证明， 

E ^(0 = g ( EO 当且仅当 ^ = EC ( P - a , s .). 

49. 设$为可积的随机变量 ( E |^| < oo ). 证明，对任何 e > 0,都能找到一个简单随 

机变量6,使得 ER - < e . (试比较《概率》第一卷第二章第4节定理1中 

的断言 .） 

50. 考察方程 


Z t = B(t) + / Z s _dA(s)^ i > 0 

Jo 

(试比较第 6 节中的方程 (74)), 其中力⑷与 S ⑷为 G 彡0时的）右连续函数， 
(在 f > 0时)存在左极限，并且（局部）有界变差，力⑼= B{0) = 0 5 AA(t) > -1, 
其中 A 4( i ) = A(t) - A{t~), t > 0, AA(0) 

证明，所述的方程在（局部）有界变差函数类中，存在如下形式的唯一解 
爲其中 £>0: 


0 . 




B) = S t -(A) 


dB{s). 


感-⑷ 

51. 设（在 t > 0时）右连续，（在 i > 0时）存在左极限，并且（局部）有界变差的函 

数满足积分不等式 


0 




V(t) < 允 + / F ( s -) dA ( s ), t 彡0, 


0 


其中 K > 0, A ⑷为右连续和具有左极限的非降函数，并且 A ( Q ) 


0 . 




证明， 


V(t) < K^ t (A), 
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特别地，如果 乂⑷ = fa{s)d S) a(s) ^ 0,则函数 F ⑷满足格朗沃尔-贝尔曼 

0 

( Gronwall - Bellman ) 不等式 


{/ a{s)d8 } 


V(t) ^ K exp 




52. 在导出赫尔德不等式 （29) 时曾经用到如下的不 等式: 


P Q 


(a > 0, 6 > 0,而 p > 1 ， g > 1，使得 * + l = 证明，该不等式(在"⑷ = xP - 1 

时）是如下 的杨不等式的 特例： 


ab < ff(a) + a > 0， b> 0 7 


其中 


H ( x ) 


h{y)dy J H(x) = / h(y)dy, 

Jo 

其中 /i = h[y), y eE+ 是严格上升的连续函数，有 /i( 0) = 0， lim /i(y) = oo , 而 
h = h(y), y G 肢 + 是 /i = /i(y) 的反函数，亦即 




o 


y —^oo 


h(y) = inf {t: h(t) > y}. 

(在所考察的场合下，连续的严格上升函数 /i = / i ( y ) 具有反函数瓦⑼= h 、).) 
53•设 X 为随机变量.证明，对一切 a >0, 都有如下的相互蕴涵 关系： 


n=l 

54•设$为非负随机变量.证明，对一切 r > 1，都有（试与第43题进行比 较): 

m a xn 


E | X| a < 


CX3 


< OO. 


r 




dx — 


x 


r — 


o 


特别地 


E(C Ax 2 ) 


2EVI 

55 •设 f 为非负随机变量，有 EO 0, 0 < Ef < oo , 又设 e e [0,1]- 证明如下的不 

等式（与 切比雪夫不等 式相反的不等 式)： 


dx 




x 2 


o 


2 


PU>eEe}^(l-£) 2 ^||-. 

译者注. 


① 




<2> 原书为： P{C > 


£ 
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56 .设 （ n ， 多）为任一可测空间.在该空间上定义集合函数 


K B ), 如下: 








\ B \ y 如果 S 为有限集， 

其佘倩形， 


M ⑻ = 


00 , 


其中问为集合 B 的势（元素的个数).证明，所定义的集合函数 M (在第1节 
定义6的意义下）是一个 测度. 该测度称 为计数测度， 它是 a - 有限的，当且仅当 
n 为至多可数的集合. 


57. (针对拉东-尼科迪姆 （ Radon - Nikodym ) 定理. I.) 设 A ，// 和 y 都是可测空间 

⑴,多）中的 a - 有限测度.假定拉东-尼科迪姆导数载和裝存在.证明，导数 
窯亦存在,并且 




di/ dv d\i 

d\ dfi d\ 

58. (针对拉东-尼科迪姆定理 . II.) 考察可测空间 （ 0, 多） = ([0,1], 潘 ([0,1])) 中的 

两个 测度： 一个是勒贝格测度 A , 另一个是计数测度 /i (参阅第56题).证明， 
M « A ， 但是拉东-尼科迪姆定理中关于密度裝存在的断言不满足. 

59 •设 A 和 / x 是可测空间 （ D , 夕） 中的两个 （7 -有限测度，/ = 

: / = 0} = 0,则密度装存在,并且可将其取为 


( A - a . s .). 






d \ 


证明，如果 


dfi * 


1//，在集合{/#0}上， 

在集合 {/ = 0} 上, 


(p = 


C 


其中 c 是任意选取的非负实数. 

60. 证明，在 [0, oo ) 上定义的函数 


= 0 


sinx 


, x > 0 


是黎曼可积的（并且 ( R )/ 0 °°/(^= f ), 但是却不是勒贝格可 积的. 

试举例说明，存在[0, 1] 上的勒贝格可积的有界函数/ = f ( x ), 对其不存在黎曼 
可积的函数 g 二 g ( x ), 使得它在[0, 1] 上几乎处处与/ = /( a ;) 相等. 

62. 试举例说明，存在 E 2 中的博雷尔函数/ = f ( x ， y ), 它分别对 yelR 和 zeR 勒 

贝格可积，有 


61 








f y)^(^y) = 0) 


E 


E 


但是却对于 （ M 2 , 潘 ( E 2 )) 中的勒贝格测度不可积. 
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63. (针对富比尼定理 . I .)设 A = A ( dx ) 为勒贝格测度 . m = M (办）为 [0,1] 上的计数 

测度.以 D 表示正方形[0,1] 2 中的对角线.证明 

[([ I D { x , y ) X ( dx )) fi ( dy ) = 0, [ ([ I D ( x , y ) fji ( dy )) x ( dx ) = 1. 

J[0,1] V[0,1] y J[0,1] V[0,1] J 

(这两个关系式表明，在富比尼定理（定理 8) 中，关于测度有限的假定对于定理 
结论的成立是一个本质性的条件 .） 

64. (针对富比尼定理 . II .)证明，如果将富比尼定理中关于 mi 与 M 2 是有限测度的 

假设换为是 a - 有限的测度之后，其结论仍然成立.再证明，如果连 a -有限的假 
设都不加,则一般来说，富比尼定理的结论不再成立（试比较第63题). 

(针对定理10中的断言 a .) 试举例说明，存在黎曼可积的有界非博雷尔函数 • 
(本 题本质上是第3节第 29 题的另一种表述 .） 

66. 设/ = /⑻是定义在赋有勒贝格测度 A = A (办）的（，,潔 ( E n )) 上的博雷尔 

函数.假设/ \ f ( x )\ X ( dx ) < oo , 证明 


65. 


IR 


\f(x + h) - f(x)\X(dx) = 0. 


lim 

h ― ►O 


U 


提示： 利用第 40 题中的断言 （ b), 

67. 我们知道,对于任何有限个相互独立的可积随机变量6,…， 《 n ， 都有 


e n &= n 略 


k~l 


k=l 


(参阅定理 6). 证明，如果6,6, ••- 是独立的可积随机变量序列，则一般来说, 


会有 




fc. 


fc=l 


k—1 


68 .设 f 为随机变量，现知其数学期望< 0,并且对某个0 / 0,有 Ee ^ = 1.证 

明，此时必有 0>0. 


69. 设 /I = h{t,x) 是定义在 [a,b] xM 上的函数，其中 a.beR 并且 a < b. 

( a ) 假设 

1) 对于每个 2 。 €肢，函数 h(t,x°) y t e [a, 6], 都是连续函数. 

2) 对于每个 t ° e [ a ,6], 函数 h(t°,x), xeR, 都是潔 W 可测的（即为博雷 


尔函数). 


证明，函数 /i = h(t,x), te [a,b],x e M , ^([a,b]) x ^( E ) 可测的. 

(b) 现在假设《为定义在某个概率空间上的随机变量，并且假设除了上述 
条件 1) 和 2) 成立之外，还有如下的条件成立： 
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3) 随机变量族 { h ( t^l te [ a , b ]} 一致可积，证明， 

( i ) 数学期望 E / i ( K ) 关于 f e [ a ，&] 为连续函数 • 

( ii ) 如果记 i ?( t , x ) = f h ( s , x ) ds , 则对于一切 t e ( a ， 卟都有导数 
存在，且等于意 ip 




d 


石 E / h ( s^)ds = F , h ( t ^). 


TO . (针对引理 2) ⑷设 $ 为随机变量，有 EM 

S >0, 使得只要 A e 多， P ⑷ < (5,就有 E (\^\ I a ) 

条件 E | S | < oo 的随机变量$对任何 e >0, 都存在常数 K = K ( e ), 使得 

( b ) 设 n > 1} 为一致可积的随机变量族.证明，随机变量族 {IE 
1} 也是一致可积的. 

71. 证明，如果下凸函数 g =贞 ㈣ 不是在整个空间 R 中给出，而是仅在某个开集 

GCR 中给出，那么只要对随机变量$有 PR e G } = 1和 E ^< oo , 则延森 
( Jensen ) 不等式（ 25 )仍然 成立. 证明，在开_ G 中给出的下凸函数分=分 ㈤ 是 
该集合上的连续函数.再证明,任何这样的函数都可以表示为 


证明，对任何 e > 0,都存在 

并由此推出：对于满足 




< DO* 


< £. 


£♦ 


k=l 


5 ⑻ = sup ( a n x + 6 n )， 


eG , 


X 


其中〜与心为某些常数. 

72. 证明，对 R 和非负实数 r , 有如下的所谓〜不等式 成立: 

\a + b\ r ^ Cr (\ a\ r - h \ b \ r ), 

其中，当 r < 1 时， c r 二 1; 而当 r > 1 时， 

73. 设€与 r ? 为非负随机变量，对任何 : c > 0,有 

P {$ 




证明，对一切 p > 1，都有 


p 


p 


Be ^ 


l) E ， 

提示: 首先考虑有界随机变量€ A c，c > 0.根据 （69) 式,对其有 

E 技 =P f x p ~" x P{^ > x}dx. 


P~ 


0 


利用题中条件，可得关于 E 贫的不 等式， 再令 c T OO , B 卩得所证. 
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证明如下的积分换元公式（参阅第15题和关于勒贝格积分换元的定理 7): 

设 J 是粑中的开集 ， y = cp { x ) 为定义在 J 上的取值于，的函数（如 

果 ： r =( 工 1， … ，: rj e J ， 则 y = (yi ， … ， y n )， 其中 yi = 糾 ( 工 1 ， … ,^n), i 二 

1，…， n ). 假设所有的偏导数@都存在并连续，使得 \ Mx )\ > 0, X e 厂其中 
Mx ) 是函数 w 的雅可比行列式\即 


74 


_ 


d(pi 

加 j 


Jip ( x ) = det 


1 < ij < n . 


在上述假设之下，集合 WJ ) 是中的开集，函数#有反函数 h = ip ~\ 此时, 
J h ( y ) 存在，为 < p ( P ) 中的连续函数，且有 \ J h ( y )\ > 0, y e < p ( I ). 

证明，对于一切非负可积函数 g = g ( x ), xel , 都有下式 成立： 


9{h{y))\My)\ d v^ 


* ⑺ 


亦即 


/ 9 { x)dx = / 

Ji Jp(j) 




(将积分理解为关于中的勒贝格测度的勒贝格积分). 

75•设= F ⑻为分布函数，有 F (0) = 0, F ⑴=1，并且在区间[0，1]上满足 

利普希茨条件： \ F { x ) - F ( y )\ < L\x - y \. 设 m 为[0, 1] 上的测度，有 m ( B ) 

J dF ( x ), B e 涿 ([0,1]); 而 A 为 [0,1] 上的勒贝格测度.证明 




S 


dm 


(L ( A - a . s .). 


d \ 


g(x) 为定义在实数轴 IR 上的某个区间 [ a ，6] 上的函数.假设其为下凸函 

数（对 x,y € [a, b] 和任何 0 < A < 1 ? 都有 ^((1-A)x + Ay) < (I ~ X) g(x)Xg(y)) , 

证明，这样的函数在开区间（％&)上连续.由此可知，这样的函数必为博雷尔函 


76. 设 


9 = 


数. 


提示：由下凸性可知：对任何 x , y,z e [ a , b ], x <y < z , 都有 

9{y) - g ⑻ / 9{^) - 9{y) 

y-x 

由此不难推得 g 二贞 4 在开区间 ( a , b ) 中的连续性. 

77•设 G ( s ) = f ： p k s k 为离散随机变量 X 的母函数，其中外 二 P{X - k }, k 

0 , 1 , 2 ,... (‘阅第28题)■令 




z-y 


Qk = P{X > fc }， r k = P{X O } fc = 0,1，2,… • 
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证明，序列 g 二 { q k ) k^o 和 r = { r k ) k>0 的母函数分别由如下二式 给出: 

1 - G ⑷ 


邮) = $， 

78. (关于破产概率，试比较第一章第9节） 设私 =% = + n ^ l , 

其中 (6)^1 为独立同分布随机变量序列，有 P {^ = 1} = P ， P {^ = -1} = 
q , p -\~ q = 1- 假设: c 为整数，并且0 < z 令 


G q [ s ) 


s < 1, 


s < 1. 




5 


r = inf {n ^ 0 : = 0 或 SW = ^4} 

为（“游戏”）随机游动的结束时刻（关于两人游戏，可参阅第一章第9节).记 

Px ( n ) = P{r 

率，可将其解释为“破产” my . 

证明，母函数 G x (5) = p x ( n ) s n 满足递推关系式 


S n = 0}，则 p x ( n ) 表示游戏在第 n 步结束并且 & = 0的概 




= 几， 


n =0 


G x ( s ) = psG x + i ( s ) + qsG x ^ i ( s ) 


G 0 ( s ) = 1, Ga(s) = 0- 

并证明，该递推关系式的解为 


A—x 


⑷ o ) 


X 


⑴ 




G x (s) 


Af(s) - A^(s) ’ 


其中 


(1 + V 1 _ 4 pgs 2 )， A 2 ( s ) = 


(1 — \/ l -4 pqs 2 ). 


入1 ⑷ — 


2 ps 


2 ps 


T 9. 彩票的编号为十进制六位数，自000000至999999,从中随机抽取一张彩票.试 

求彩票号码的各位数字之和等于21的概率 P 21 . 

提示： 采用以考察母函数为基础的方法，参阅附录第3节（本书 p 321). 本 
题的答案为 P 21 = 0.04. 

80. 设随机变量 f 的密度函数/( ㈤ 为单峰函数，其最大值在点: r Q 处达到 ㈨ 称为 

分布的众 数或峰 点)，并 且在邱 左边非降，在其右边非升. 

证明如下的高斯不 等式： 对一切 e > 0,都有 

提示： 如果在 y > 0处非升，则对 e > 0,有 




4 


p{ie 


2 




— 怎 0 


— $0 


9 e 2 ' 


4 


2 


y 2 9{y)dy^ 


9{ y)dy < - 


e 


9 


0 


e ： 


利用这一不等式，可以得知,对 e > 0和々=居|€- 


，有 


2 


^0 


2 


4 


e 2 
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81•设&,•••，&为独立同分布随机变量序列，有 P {6 > 0} = 1和 D ( ln 6) 

证明，对 e > 0,有 


2 


(J • 




2 




a 


• U(E lnCi) n e nE ^ 1 - 


P 


2 • 


ne 


提示：利用切比雪夫不等式 


BYn 


P {\ Y n - EY n \ ^ ne } ^ 1 




n 2 e 2 


71 


在其中取 k = 

82.设 P 和戶是 ( Q ^) 中的两个概率测度，其中戶关于 P 绝对连续尹《 P ), 

密度为 




dP 


^ c ( P - a . s .) 


其中 c 为常数（显然有 c 彡 1). 证明，可以找到 a e (0, 1] 和概率测度 Q ， 使得 


P = aP + ( l - a ) Q . 


提示: 取某个 C > c 5 并令 a = l/CR 




Q ( A ) 


dP . 




S 3. 设 f 与 n 为相互独立的随机变量，并且= 0. 证明 ， E |《 - 切彡 E |7?|, 

84. 设心，&，•■■为取值于肢= (- oo , oo ) 的独立同分布的随机变量.令私= 0, S n = 

6 +…+匕.以递归方式定义“阶梯指数”(也称为“阶梯时刻”)： 


Tq = 0, Tk — inf {n > T^i : S n — Sr k ^ x >0}， k^l 


如同惯常，令 inf 0 = 


显然，对一切 n > 1，都有 


oo . 


P {7\ = n } = P{Si < 0，…， S n ^i <0， S n > 0}- 


证明，随机变量的母函数 G { s ) - E f n s n (其中 / n = P{Tx = n }) 由下式给 


71—1 


出: 


n 


Y1 t p {S n > o} 卜 i s i < L 


G ( s ) — exp 


n=l 


85. 设条件与符号均同上题，令 


^ 0 }, 


0}， 

71=1 


A = 


B = 


71—1 
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证明 


如果 B = 00, 
如果 s< 


P{Ti < oo } = 


-B 


— e 


oo, 


并且，如果 B = oo, 贝 ！ 1 


，如果 
如果 4 = 

86. 如同第 84 题 ,$1 ， 6,… 为独立同分布的随机变量序列，有 > 0. 记 = 

0, & 二 fi + • ■ ■ + Cn ， 令 


A 


e 


oo, 


ETi 


oo. 


oo ? 


=inf {n ^ 1 : S n > 0}. 


证明 Er< 


OO. 


87. 设第 84 题中的条件成立，而深 w 为冲程，即 S Q ,S U …， S N 所能取的不同值的 


个数.令 


a(0) = inf {n > 0 : S n = 0} 


即第一次回归零点的时刻 . 

证明，当 TV— oo 时，有 


淡 N 


P{(j(0) = oo}. 

(P{a(0) = oo} 是不回归零点的概率 . ） 试将本题结论与第一章第 9 节第 7 题的 
结论作比较 . 

注：如果所考察的是简单随机游动（即 P{Ci = 1} — p, P{Ci = ~1} ~ q), 
则根据第八章第 8 节第 16 题，当 7V 


E 


— > 


N 


时，有 


— > oo 




N 


E 


P-Q ， 


N 


换言之 


如果 p > 1/2, 
如果 p - 1/2, 
q~p , 如果 p<l/2. 


P-Q^ 


没 N 


E 


0 


N 


88. 设 … 为相互独立的区间（ 0 ， 1) 上均勻分布的随机变量序列.令 


= min{n 彡 2 : > Cn - 1 }， K x ) = min l： 6 + … + Cn > ①} 


1 / 


其中 0 <ar 彡 1. 证明， 

(a) P{M ⑻ > n} = x n /n\^ n ^ 1. 
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(b) Law (i/) = Law (p(l))* 

(c) E// = Ep(l) 

提示 ：（ a) 利用归纳法 . 

( b ) 应当证明 P { z / >n} = P{Ci >6>*--> Cn } = l/nl 
89. 利用赫尔德不等式，证明，算术平均值不小于几何平 均值 : 对于 & > 0, 1 彡 


6- 




n 


有 


1/71 




§7. 关于 a - 代数的条件概率和条件数学期望 


1. 设 C 与 7? 是独立同分布的随机变量，数学期望 EC 确定.证明 


E{C | C + 77} = E{r? I € + r?} = 

提示 : 应当指出，对任何 A e a^ + 7]), 都有 B^I a = Er/h. 
2 • 设为独立同分布随机变量序列，有 E|$i| < 00. 证明 


(a.s.). 


2 


S n 


I *^n ， ^n+1 ? • " } = (a.s .)， 


n 


其中 ^ = 6 + •••+eu. 

提示： 利用 事实： 对任何 A e a{S n , 5 u+ i,*, ■ )， 都有山 = I a • 

设 X 与 y 为随机变量，使得正则分布 P X (B) = P{Y eB\X = x} 存在 . 证明， 
如果 Eb(W < oo, 则 Px-a.s. (其中 P x (C) = r{cj： X{lj) e C}) M 

j 9 {^, y ) Px { dy ). 

提示 : 0 用正则条件测度的定义和 A 系 ” 的概念（参阅第 2 节 ) ，证明，对 

任何形如 f ： 的 g(x， V )， 映射 

1=1 


3 . 


Eb(X, Y)\X = x] 




g{x,y)P x {dy) 


R 


都是 ^(E) 可测的，其中 ^ e 潔 (3R 2 ) ， 并且对于任何 B £ 溪 (M )， 都有 

J B {J R 9 ^ y) p ^( d y)) Q ( 血 )’ 

其中 Q 是随机变量 X 的分布 . 由此首先可以推出，对有界 ^(E 2 ) 可测的函 
数 , 所证的性质 成立； 然后可知它们对于任何使得 E|^(X,y)| <oo 成立的函数 

g(x, y) 都成立 . 


Bg(X, Y)I b = 



















































































第二章概率论的数学基础 


•94 . 


4. 设随机变量^的分布函数为 F e ( x ). 证明 


xdF^ (x) 


E(C I a < $ < 6) 


聊一巧⑷ 


(假设 F e (b) - F e (a) > 0). 

提示： 根据条件期望的定义，我们有 


E [ C/(a <^ b )} 


E ($ I a < 6 ) 




E[/(a <^ b )] 


(假设 E[/(a <^ b )]> 0). 

5 •设 0 = g(x) 为定义在 M 上的下凸函数，有 E|^(C)| < oo. 证明，对于条件数学期 
望 (P-a.s.) 成立延森不等式 


提示: 首先，对于€关于 a - 代数爹的正则条件分布 <3卜;扔，有（参阅定理 


3) 


E ( 分 (C)| 爹 )( 山 ）=/ 9(x)Q{lv\ dx), 


然后运用对于“正常”数学期望的延森不等式. 


6. 证明，随机变量 e 与心代数爹相互独立（意即对任何 b e 淨，都有 e 与 ib ( uj ) 

成立的博雷尔函数 g ( x ), 都有 


独立)，当且仅当，对于任何使得 E |^( C )| 


< OO 


E 刚 |約=贼). 

提示： 如果 A e 穿，而 B e 潘 ㈤ ，则由与爹相互独立，可以推出 p ^4 n 
{ g (0 e Bj) = r(A)P{g(0 e B}, 这也就意味着 B(g(0 \ < S ) = Eg ⑹.反之，若 
该等式成立，则特别地，可令此）=瓜 G 召)，此时得到 


P(An{^eB}) = P(A)P{^eB}, 

再由4 e 穿与 B e 溪 ( R ) 的任意性，即得€与贫相互独立. 

7 •设€为非负随机变量，爹为 CT - 代数， < fC ^. 对于义 e 爹，我们以等式 Q(A) = 
f(dP 定义测度 Q. 证明， E (⑽ < oo —■)， 当且仅当,测度 Q 是 a - 有限的. 

A 

提示：为证必要性，需令= { E ⑹爹）< n }， 验证 Q ( A n ) < n , 由此即可 
断言 Q 是心有限的. ^ 

充分性.由存在淨中的集合 Ai , A 2 , • ■ * ,使得 U ▲ = Q 及 Q ( Ai ) < oo , i = 

1,2,... 的事实，应当推出 E ( e |^)< cx ) ( P - a . s .)- 
8. 证明，条件概率 P(A ⑻是“连续的”， 意即： 如果 limA n = A, limB n 

P ( B n ) > 0, P ( B ) > 0, 则有 limP (^ U | 凡） = P ( A | B ). " n 


B 
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9.设 Q = (0,1), ^ -激 ((0,1)), 而 P 为勒贝格测度.设 1(0；) 与 Y ( u ) 为相互 
独立的随机变量，都服从区间（0，1)上的均匀分布.令 Z(cu) = \X{uj) - Y(uj)\ 
为义 ㈣ 与 Y(cv) 之间的距离.证明， Z 的分布 F z ( z ) 具有密度 f z { z ), 并且 
fziz ) = 2 ( 1 - 0 )， O ^ z ^ l . (由此可知 ， EZ = 1/3.) 

10. 在半径为 i ? 的圆 {(x,y) : x 2 + y 2 彡丑 2 } 中“随机地”选取两个点 先 和 A 2 , 换 

言之， 我们相互独立地依密度 （以 极坐标 木 =(内，叫 ， i = 1,2 表示） 

V(pi e dr, 8i e d6 )= 

选取这两个点.证明，次与 A 2 之间的距离 p 具有分布密度 f p (r): 


rdrdO 


i = 1,2, 


ttR 2 ’ 


2r 


fp ( r ) 


irR 2 


其中 0 < r < 2 i ?. 

11 •在（以 (0,0), (0,1), (1,1), (1,0) 为顶点的）单位正方形中“随机地”（需明确含 

义!）选取一点 P = (x,y). 试求该点离点（1 5 1) 比离点（ I / 2 ,1/ 2 )更近的概率. 

12. (会面问题） A , B 二人约定在7时至8时之间会面，但二人都忘了会面的具体 

时间，于是都“随机地”在7时至8时之间到达会面地点,并且都等待了不多于 
10分钟.证明，他们能够见上面的概率不大于 11/36. 

I 3 •设&， X 2 ，…为独立随机变量序列， S n ^ f ： X { . 证明，负与为关于馬所生 

成的心代数 < r ( S 2 ) 条件独立. 

I 4 •称 a - 代数负与為关于 a - 代数％条件独立，如果 

V { A x A 2 I %) = V ( A 1 I %) P ( A 2 I %), 对一切 ^ i = l ,2. 

证明，洗与％关于％的条件独立性等价于下述条件中的任何一个 ( P - a . s .) 


成立: 


( a ) P(Aa I a (^ 2 U %)) = V { A 1 \ %), 对一切 ^ e 负. 

( b ) P(B I a (% U %)) = P(B I %), 对一切 B e 外，其 中釣为 7 T - 系，使 

得贫1 = a («^ i ). 

( c ) | a (^ 2 u %))- P(Si I %) P ( B 2 I %), 对一切 B 1 e B 2 e 
少 2, 其中少 1 和少 2 为系，使得淨! = a ( 淨1)，％ = a {^2)- 

( d ) B(X I E(X j 爲)，对一切 a (為 U %) 可测的并且存在数 

学期望 EX 的随机变量 X (参阅第6节定义 2). 

15. 证明，关于条件数学期望的法图引理的如下推广形式（试比较定理2中的 ( d )): 

设汎 恳 P ) 为概率空间， (^ n ) n >1 为随机变量序列，使得数学期望 E &， 
n > 1和 Elimen 有定义（可以取土 oo 值，参阅第6节定义 2). 
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假设爹是，中事件的子心代数，且 


supE ( C ~/( C n > a ) | ^) -> 0 ( P - a . s .) 

n^l 


a — ^ oo . 


证明 


E Qm(n I ^ limE(en i ( P - a . s .). 

16. 如同上题，为随机变量序列，使得数学期望 ECn , n ^ 1有定义，务是多 

中事件的子 a - 代数，使得 


sup lim E (|^ n |/(| C n | > fc ) I 爹 ） = o ( P - a . s .). 


w 


k 


证明，如果 — C ( P - a . s .), 并且坟有定义,则 


E (匕 I 爹卜 E(e 丨爹) ( p - a . s .). 

17. 将上题中的条件 （*) 换为: 对某个 a > 1，有 supE(br | 爹）< oo ( P - a . s .). 证明 

(**) 式中的收敛性仍然成立. 

18. 设对某个 P 彡1，有心工证明，对任何子 ( T - 代数爹 g 多，都有 


*氺) 


71^1 


E($ n | ^ E(C | ^). 


19. 设 X 与 F 为随机变量，有 EX 2 < oo , E | F | < 

⑷令 B ( X \ Y ) = E[(X - E ( X | V )) 2 | F ]. 证明， BX = EB ( X \ Y ) + 

DE ( X | F ). (试比较第一章第 8 节第 22 题 .） 

( b ) 证明， cov ( x ， vy -= cov ( x , E(y I x )). 

20. 试说明 ，例 5 中的充分统计量 T ( u )^ siXriu ;)) +…+ s { X n ( u )) 是否为最小的. 

21. 试证明因式分解表达式 （57) 的正 确性. 

22. 证明，在第10小节的例5中，有 Be{Xi | T ) = 皆 T ， 其中，对于 a ; = ㈤ ，… f x n ), 

有 Xi ( uj ) = i 


oo* 


l = ly * * 


.,n* 


23. 设 A , S 与 Q ，… ， 为概率空间 （ Q ， 多, P ) 中心代数多中的事件.设对任何 


都有 


4=1, 


• ,n ， 


• 4 


P ( Ci ) > 0, P ( A | a )> P ( B | a ) 

且 C ) Ci = a 试问，是否必有 P ( A )> P ( S )? 

i=l 

24. 设 X 与 Y 为随机变量，有 B \ X \ < oo , E | F | < oo , 以及 B{X \ y ) 彡 1 "和 

E(F \ X)^X ( P - a . s .). 证明 ， X = F ( P - a . s .). 

提示： 首先证明，关于 场合下的证明可以归结为等号情形下的证明. 
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方法 1:取函数 g(u) = arctan u } 则有 （I — Y)(g(X) — g{Y)) > 0 ( P - a . s .), 


同时容易验证 E[(X — Y)(g(X) - ^( F ))] = 0. 因此有 X = F ( P - a . s .). 

方法 2: 分别验证二1，- 1, 再令 Z 二 


X + +l 


，并证明 

E ( v ^- ^) 2 = 1. 由此可得 P { X + = Y +} = 1. 同理可证 P { X _ = Y ~} = 1. 

注： 我们在此顺便指出，不存在这样的随机变量 X 与 F ， 使得 E | X | 

oo , E | F | < oo , 并使得严格不等式 E ( X | y ) > 1"和 B { Y \ X ) > X 成立.（因 
若存在这样的随机变量，那么就会导致如下的 矛盾 ： EX == EE(X I Y ) >BY = 

EE(F IX ) > EX .) 


Y++1 


< 


25, 设叉为随机变量，服从几何分布: 


k—1 


P{X = k } 


W 


， = 1，2,…， 0 < p < 1， 


=1 


pq 


q 


—p. 




证明，对于 m 7 ne {1，2，. • *}， 有 


P{X > m + n\X > n } = P{X > m }. 


** 


(试给出该性质的一种解释 .） 

再证明其逆 命题: 如果取值于集合 {1,2,...} 的离散随机变量满足性质 (**), 
那么它必服从几何分布 （*). 

(试比较第 4 5题 .） 

26. 证明，随机向量 （ X ， y ) 与 ( X , F ) 同分布 ( X , Y ) ^ ( X } F ), 当且仅当，对任何事 

件 A , 都有 V{X eA \ Y } = V{X eA \ Y } ( P - a . s ,). 

27 . 设 X 与 F 为相互独立的参数分别为 A > 0 和 m > 0 的泊松随机变量.证明，条 

件分布 Law(X \X + Y ) 为二项 分布： 




k 


n—k 


A 




P{X = k\X + Y = n }= C ^ 


， 0 < fc < n . 


A + /i 

28. 设随机变量 € 服从区间 [- a , b ] 上的均匀分布，其中 a > 0, 6 > 0. 令的= 

a ( ICI )， 為= cr ( sign ^). 试求条件概率 P ( A | 劣 )， i = 1,2,其中4 = {《 > 0} 和 

A = < a }, 而 a e [— a , b ]. 

29. 试举例说明，等式 E(( + r ?| 爹 ） =E ⑹淡 ) + E(t?| 爹） （ P-a.s.) 并非恒能 成立; 试比 

较第 4 小节中的性质 D' 

提示： 可能会出现这样的情况， E(C + r?| 爹）确定并且 (P-a.s.) 为零,而此时 
作为和的 E ⑹ ^) + E ( t /|^) 却是不确定的. 

30. 在事件 Be 多 关于 a- 代数的条件概率 P(S| W ){ uj ) 的定义中（参阅第 

2小节中的定义 2) 并未假定 P (. | 穿 )( w ) 概率为1地是 （ Q ， 多） 上的 测度. 

试举例说明， P (-|^) M 的某些版本（以正概率 P ) 不是测度. 


A + /i 
















































































































第二章概率论的数学基础 


■98 . 


31. 试举例说明，存在相互独立的随机变量 X ， y 和^代数％使得对某些集合 A 

和 B ， 在正测集上有 


P(X eA, YeB\^ P(X eA\^){ uj)V{Y eB\ 爹 )(w). 


(换言之，独立性不能自动保证条件独立性 .) 


32. 如果随机变量族{心 ， n > 1} —致可积，并且 G （ p-a. s .), 则 E& 4 （参 

阅第 6 节定理 4 b )). 同时在 IGK r /， Er ? < 

条件之下，还可证明（定理 2 a )) 条件数学期望的 ( P - a . s .) 收 敛性： E ( C n I <S) 

E ⑹穿） 


> 1，并且 (P-a.S.) 的 


oo,n 


— > 


n —^ oo. 


试举例说明，如果将条件 “ICnl < A Et / < oo，n > 1” 换为“随机变量族 

{ Cn , n ^ 1} 一致可积”，则未必就有 P(Cn I ^ P ( e |^) ( P - a . s .) 

似地,对于第 6 节定理 4 (即关于一致可积随机变量族的法图引理)，若将其中的 
性质 a ) 换为条件数学期望，则亦会有相应的情况出现.（亦可参阅上面第15〜 
17题中所引述的命题 .：） 


类 


n — > oo. 


33 •取 （ [0,1] ，多， A) 作为概率空间 ㈣ 多， P )， 其中 A 是勒贝格测度 ，多 为博雷尔集 

合类.试举例说明，存在子 a _ 代数 省 H 在它上面的条件数学期望 E (1 1 汐) ( a ;) 
存在形如狄利克雷函数的 版本： 


1, ^为无理数， 

0, w 为有理数. 

(事实上，完全可能出现这样的情况，即对于非常“光滑’’的函数 C = CM , 例如 
CM 三1，其条件数学期望 E ( C | 淨 ) M 也可能会是 o ; 的极不‘‘光滑，，的函数 .） 

34. 如果随机变量 e 的数学期望 EC 确定,则根据性质 G * (参阅第4小节)，应当有 

E ( E(e 1 7/)) = EC (其中 r ? 为某个随机变量).试举例说明，存在这样的随机变量 
C 和 T /， 对于它们，数学期望 E ( E (《|7?)) 确定，但是 EC 不存在. 

( k ^ O ) 是以 0>0 为参数的泊松分 
布.证明，对于参数1/6>,不存在无偏估计 : T =『 ㈣ (意即 E ^| T | < oo , 沒 > 0,且 
对一'切^ > 0,都有 E@T = 1/沒 .） 

36. 考虑概率-统 计模型 （ Q , 多，夕)，其中概率测度 P 的族夕= { P } 是受控的.设 

爹 g ，是某个充分的 a - 代数.证明,任何满足条件爹 g #[多的 a - 代数#都 
是充分的.（在伯克霍尔德 ( Burkholder ) 的专著 [18] 中，有例子表明，在 不受控 
的场合下，一般来说，没有此结论 .） 

37. 证明，下列各空间都是博雷 尔的： 

(a) (E n , ^{W 1 )). 

( b ) ( E °°, 潘 (3 R °°)). 

(c) 波利希空间（完备可分的距离空间). 


d(uj) 


一 0 


35•设 Q = {0,1，2,… } ，而 V e {uj = k} 


k \ 
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38. 设（五，釣是博雷尔空间.证明,存在可数生成的代数 < 使得 a ( s ^) = 

39. (针对性质 K*) 设 r ? 是爹可测的随机变量， C 是多可测的随机变量，并且 

E | r ^ < oo , E | C| p < 00 ,其中 ： p > 1, ^ + ^ = 1. 证明， E (^ | - 7? E (^|^). 

40 . 设 X 为随机变量，其分布对称 (Law (X) -Law (-X)), 以 F(x) 表示其分布函 

数.试求条件分布 P(X < Ma (岡 ))( w ), x G M , 其中 a(\X\) 是由随机变量 | X | 
生成的 a - 代数. 

41. 设 A 与 B 为事件，有 P(A) = a 


P ( B ) = 1 — A 其中0 彡 /?< 1， 卢彡 a . 证明 




a — 




0 




42 .设是一个家庭中有 fc 个孩子的概率,并且 

1 

Po = Pi — a (〈 Pfc = (1 _ 2 a )2 




， k ^ 2. 


2 


(生男孩和女孩的概率都是 1/2.) 

试在一个家庭已经有两个男孩的条件下，求 

( a ) 该家庭仅有两个孩子的概率 P (a) . 

( b ) 该家庭还有两个女孩的概率 P (6). 

提示： 可以简单地利用贝叶斯公式解答本题.为了检验，我们指出 p (a) = 

27/64, P {b) = 81/512. 

43 .设 X 为随机变量,其分布对称 （X - -X) } 函数沪 = <p(x), x G 股使得 E|^(X)| 


< 


证明 


OO, 


E [^( X ) I | X |] = -[^(| X |) + <f(~\X\)} ( P - a . s .). 

设 X 为非负随机变量.试求条件 概率： 


44. 


p ( x < x | ix\) 和 p ( x < x |「 xi ), 

其中[ X 」表示不超过 X 的最大整数（在一般的文献中，通常记为[ X ])，而 「XI 
表示不小于 X 的最小整数. 

45. 如果随机变量 X 服从参数 A > 0的指数分布，即 P{X > x } 

对任何非负实数 x 与 y ， 都有如下性质 （无记忆性） 成立： 

P(X > x -\-y\X > x) = P(X > y). 

证明，对于广义非负（即取值于 [0, oo ] 的）随机变量 X ，如果具有所述的性质， 
则必有下述情况之一发生：或者 P{X = 0} = 1;或者 P{X 
从参数为某个0 < A < oo 的指数分布. 

提示 ：令/ ㈤ = P{X > x }, x ^ 0, 则 由所述性质得 /(z + y) — f(x)f(y). 

于是所要证明的命题归结为证明，该函数方程在右连续不超过1的非负函数范 


彡 0, 贝 1 J 


Ax 


e— 一 ? x 




} = 1；或者服 


= oo 
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围内只有如下三种形式的解：或 /(X) 三 0; 或 / 化）三 1; 或对某个 0 < A < 

有/⑻ 

46. 设随机变量 X 与 F 均具有有限二阶矩 . 证明， 

(a) cov(X, Y) = cov{X,B{Y\X)). 

(b) 如果 E(F|X) = 1 , 则有 


oo 


— 入 a: 




BX ^ BXY. 


47 . 设 A ， … ，为独立同分布随机变量 . 在离散情况下，以 /Or; 0 表示其分布 

取值 X @ e {0,1 ， … }) 的 概率 ; 在绝对连续情况下，以 /(X; 0) (X e R ) 表示其 

分布密度 , 其中 0 为某个参数 . 

我们要在关于 /(A 的的各种不同假设情况之下，讨论关于参数 0 的充分 
统计量 T n ^T n (X lr •- ,X n ) 的构造问题 . 


证明 


(a) 如果 /(x; 60 = 0(1 - #， x G {0,1 ， ...} 和 0 < 沒 < 1 ( 几何分布)’则关 
于 0 的充分统计量是 Tk = & +… +X n . 

(b) 如果 


T{0 + 2 ) 


/(^； 0) 


(1 一: r )， 0 ^ x ^ 1, 0 > 0 


X 




mm 


( 参数为 a = 0, 13^2 的贝塔 分布 ; 参阅第 3 节表 3 )，则关于沒的充分统计量是 

T n ^ X 1 


X n . 


(c ) 如果 


—x/0 


/( 工；沒) 


$>0 


r 


( 参数为 A = 1/0 的指数分布，亦为参数为 
节表 3), 则关于 0 的充分统计量是 T„ = & +…+ 

(d ) 如果 


1^ = 0 的伽玛分布 ; 参阅第 3 


a 


2 


2 


/26 


/(^； 0) = 


— X 


， x G E , ^ > 0 


e 


V 2 ^e 

( 参数为 (T^e 的正态分布 #(0, (J 2 )), 则关于 0 的充分统计量是 : T„ = + . 


+ 


• • 




(e ) 如果 


/-i e -x 川 


f{x; 0) = 


， x ^ 0, 6 > 0 


T {$)0 e 

( 参数为 a = O,0>O 的伽玛 分布 ; 参阅第 3 节表 3) ，则关于 0 的充分统计量是 

T n = Xi + • • * + X n . 

设 /(x; a, 奶为贝塔分布（参阅第 3 节表 3) 的密度函数 ， Ka = /3^d>0. 
试求关于参数 0 的充分统计量 . 
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设 


1 一 { Oi / x ) 92 , 


x ^ &1, 


F{x; 9) 




X < 沒1 


0, 


为两参数 <9 =( 心，⑹的帕雷托 (Pareto) 分布，其中 ^ > 0 ,心 > 0 (参阅第三章 
第 6 节第 23 题中的定义 ). 试求关于参数 0 = ( 心， 6> 2 ) 的充分统 计量 . 


§8. 随机变董 II 


1 . 试证明（ 9) ， (10), (24) ， (27) ， (28) ， (34) 〜 （ 38) 式 . 


2• 设 6,… ， & 为独立同分布随机变量，具有分布函数 F{x) ( 当密度函数存在时 , 
具有密度函数 f(x )). 令 f = max{$i,. ** ,Cn} ? C = minimi, ■• - p 二 


证明 


( F ( y )) n -( F ( y )- F ( x )) n , 

{ F ( y )) n , 

(n-l)[F(y)-F(x)) 


y > X ， 


F f € ( y ， x )= 




n—2 


y>x, 


n 


4e (仏 x ) = 


o 


y 


[F{y) - F(y - x)] 71 ' 1 f(y)dy, x > 0, 

x < 0, 

rOO 

n{n - 1) / [F{y) - F(y - x)] n ~ 2 f(y - x)f{y)dy ，x ^ 0, 

x <0. 


n 


F P { x ) 






0, 


以工） 二 


0, 


3. 设随机变量 Cl 与 6 相互独立，分别服从参数为 Ai > 0 和 A 2 > 0 的泊松分布 . 


证明 


(a) Ci + e 2 服从参数为 M + A 2 的泊松分布 . 

(b) ^ - 6 具有如下形式的 分布： 


fc /2 


入1 


一（入1+入 2) 


4(2 yAiA 2 ), fc = 0, 士1，土2,…， 


P{6 ~ ^2 = k} ~ 


e 


久2 


其中 


2r 


X 


h( 2 x) = x k ^2 

是 fc 次第一类修正的贝塞尔函数 . 

提示： 证明 （ b) 的一种方 法是： 考察随机变量 6-C2 的以级数形式表出的 
母函数（详见附录第 3 节 ). 


r\V(k + r + 1) 


r=0 
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4•在《概率》第一卷第256页中的 （4) 式中令 


= 0 - 证明 


mi — m2 


yi - p 2 

^( a ^ z 2 — 2 paia 2 Z 4- erf ) _ 


/i ㈤ = 


5 •设 C 与 q 为随机变量，称 〆 (€， T ?) = supp ( w ⑹, v ( r ])) 是它们 的最大相关系 

数，其中的上确界为对一切使得相关系 v ( rj )) 确定的博雷尔函数 

(X) 所取. 证明，随机变量《与7/相互独立，当且仅当 〆 ($, 7?) = 0. 
(亦可参阅下面的第6题 .） 

提示： 必要性显然.为证充分性，令奴⑹= I A {0： ^ iv ) = IbW ), 其中， A 与 
B 为任意的博雷尔集合.由性质 supp ( u (^), v ( rf )) = 0应当可以获知 


U = 


u { x ), 


V = V 


P{f eA rjeB}~P{^e A}P{ V eB} = P (i A (0, i B (v)) - o* 

再由 A 与 b 的任意性即得 《与 ^相互独立. 

6•(第5题续）设 （n, 多， p) 为概率空间，岛与爲是多的两个子 (7- 代数，而 
L 2 (n， 馬， P) 是只可测的二阶矩有限的随机变量的空间， 2 = 1,2. 




令 


〆( 岛，多 2) = SUp|p(Cl, 6)1 ， 

其中 P ( Ci ，^2) 是 Cl 与 （2 的相关系数，上确界为对一切€ L 2 (0, P ), i = 

1， 2 的随机向量 ( Ci , 6) 所取. 

( a ) 证明，如果多^ = o -( Xi ) 与多 2 = cr ( X 2 ), 其中 & 与 X 2 是 （ Q ， 多， P ) 

上的两个随机变量，则 


p*(<j(Xi), er(X 2 )) = sup|p(Xi, x 2 )\. 

( b ) 设岛 =v <(= u m ), ^ 2 = y 涿卜 u 涿)，其中 ^ 是某个指标 

tG/ i^.1 i€/ 

集，滅，藏是 CJ - 代数，而所有的 CJ - 代数 cj ( M , ^ i ), i e /, 为整体独立.（将 
«涿）理解为由所有集合次 e 蜮和莰 e 涿所生成的 a - 代数 .） 证明 


V 蛛 V 藏 


suppK 藏） • 


P 


iei 


iei 


iei 


7.设岛与多2是两个子 a - 代数.我们引入下列各种混合特征指数（其中的上确 

界为对所有的集合 Be ^2 所 取)： 




a (島 ，^ 2 ) = sup \P{A C\B)~ P{A)P{B)\ } 

^2) = sup \P(B\A)~ P ( B )|, P ( A ) > 0, 

P(A n B) 

P(A)P(B) — 


0( 島，為 ） =sup I 


， P ( A ) P ( B ) > 0, 
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再令 


N M 

i = l j=l 

其中的上确界为对所有这样的分割对{灰，… ， Aat } 与{执，… , B m } 所取，其 
中对一切1彡 i 彡 iv ， 1彡 j 彡 M ， 有牵 e $， Bj e 多 2. 

结合上题所定义的，(多1，多 2), 证明下述各不 等式： 

a (^ i , ^ 2 ) ^ /?( 島，^1, ^ 2 ) ^ 為） 


0(^u ^ 2 ) 


Slip - 


2 


和 


(島 ，多 2) <，(岛，多2)< V /2 (， l , 多2)， 

，(凡 2^/ 2 (島，多 2 )// 2 (為， $)• 

为独立同分布的非负随机变量，服从密度函数如下所示的指数分 


a 


8. 设 n ，“ 


• Jk 


布: 


f { t ) = Xe ^ x \ t ^ Q . 

证明，随机变量 n +… + r fc 的分布具有如下的密度函数: 


x k t k ^ 


1 At 


e 


t ^ o , 


( fc —1)! ， 


并且有 


k — 1 




^) = IZ 


- - At 


P{n + ••• + ?> > 


e 


i\ • 




9. 设卜維 a 2 ). 证明，对一切 p 彡1，都有 

m\ p - C p a' 


其中 


2P/2 


p + 


(7 P 


r 


1/2 


2 


7 T 


而 r ⑷ 1 
所有都有 


dx 是欧拉 -ft 玛函数.特别地（参阅第6节第36题)，对于 


5 — 1 


e 


E《 2n 二 （2 n — l )!! cr 2n . 

10. 设 （ 与 r ? 为相互独立的随机变量，使得 C + 7?与 f 同分布.证明 T ] ~0 ( P - a . s .). 

提示：设7?1，…， T ? n，lO 1相互独立，均与7?同分布，并且都与€独立.则 

在题中的条件下,对任何 n > 1，随机变量 c +仿+…+加都与 C 同分布. 

如果€与 r ? 的所有阶矩都存在,则为证题中结论，还可通过比较半不变量 

k ^ l 来实现. 


㈦ 


㈦ 


与 


S 


乏+1? 
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11. 设随机变量对 {U,V) 服从单位圆 {{u,v) : u 2 4- ^ 1} 中的均勻分布，而 




W 2 = U 2 + V 2 . 令 


2\nW 


2\aW 


X = U 


Y = V 


W • 


W 


证明， X 与 Y 是相互独立的正态 AT (0, 1) 随机变量. 

12 . 设 [/与 V 是相互独立的区间 (0,1) 上均匀分布的随机变量.定义 

X = y/~~\nV cos{2ttU), Y = sin(27rC/). 

证明， X 与 Y 相互独立，且都服从正态 AT (0, 1) 分布. 

13 . 设 H 是正值随机变量，服 从瑞利分布， 其密度函数为 


r f r 2 1 

^ eXP l-2^/ 




r > 0, 


其中 CJ 2 > 0; 而为服从 （ a, o ； + 2nk) 上的均匀分布的随机变量,其中 keN = 

{1,2，...}， a e [0,2 丌 ). 

证明，随机变量 X = Hcos 0 与 Y 相互独立，并且都服从正态分 

布 AT (0, a 2 ). 

14. 试举例说明，存在随机变量 《与 7/, 它们都服从高斯 分布， 但是它们的和 

不服从高斯分布. 

15 . 设 X 为随机变量，服从柯西分布，其密度函数为 


a 


/⑷ 


2 • 


7T a 2 + X 


证明，随机变量 Y = X n 的密度函数贞 y ) 为 


ay 


为奇数， yeR , 


n 


7m(a 2 + y 2 / n ) 


9{ y )= 


2 叩一 


为偶数， yeR . 


n 


7rn(a 2 + y 2 / n ) ’ 


16 •设 F ( x ) 为分布函数 • 证明，对任何 a > 0,函数 


x-f a 


aj+a 


F[u)du 与 G 2 (x)= 


Gi{x) 


F(u)du 






2a 


a 


也都是分布函数. 


17. 设随机变量 X 服从参数为 A >0 的指数分布 (f x (x) - \e~ Xx I(x ^ 0)). 

( a ) 试求 Y a > 0的分布密度（相应的分布称为 韦布尔 （ Weibull ) 


分布). 


I 
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( b ) 试求 Y = \ nX 的分布密度（相应的分布称为二 重指数分布， 亦可参阅 


第48题). 


( c ) 证明，随机变量 X 的整数部分[ X ]与分数部分{ X }相互独立，并求出 
它们的分布. 


设随机变量 X 与 y 具有形如 f(x,y) = gWx 2 +y 2 ) 的联合密度函数 f(x ， y). 

⑷试求随机变量 p = VX 2 + Y 2 与 (9 = arctan ( y / X ) 的联合密度函数.证 

明，随机变量 p 与0相互独立. 

(b) 令 C7 = (cosa)X + (sina)y, V — (― sina)X + (cosa)y, a G [0,2 冗],证 

明，随机变量 c / 与 F 的联合密度函数就是 f{x,y) (这一事实反映了向量 （ X , y ) 
在“旋转变换”之下的分布不变性). 

19 .设&，... ， X n 为独立同分布的随机变量，具有连续分布函数 F 二 F{x). 在我 

们的假定之下，既然有 P{Xi = Xj} = 0, (参阅，例如，本节中的第76题 
等)，因此 


18. 


= ^}) ^ 5^卩{足 ~ Xj } = 


P { 对某些 i _ j 有 Xi = Xj} = P 


0. 


i<j 


这就表明 7 概率为 1 地可将 XxH ,--- , x n (^) 按大小（唯一地）严格排序. 

如果将排序后所得的新随机变量记作义产，… ， xi n) (称为 秩序统计量， 亦 
可参阅第三章第13节和第一章第12节第8题),则概率为1地有 

对 l ) ( a 0 <•••<#) (⑷ 


和（试比较第2题） 

X [ n \ uj ) - min (X“u;) ， … ,X n (a;)),.-- ，疗 ) M = max ( 心 ㈤ ，…， X n { u ;)). 

(a) 证明，对于 n 彡 2 和 2 彡 fc 彡 n, 随机变量的分布函数 i^ n) 
F ^ n \ x ) 满足如下关 系式： 


Ft) ⑻ = F(x)Ft_~ l) (x) 4-(1- Fix^F^ix). 


以下补充假设分布函数 F = F ( x ) 具有密度函数/ = f ( x ). 


证明， 


( b ) 随机变量 xi n ) 的概率分布密 度为: 


打 /㈤ ⑻ mi — F ⑻广 fc . 

( c ) 随机变量，…， Jd n ) 的联合密度 f ㈤ ( Xi ， …， x n ) 为 

••- f { x n ), 如果 Xi < - - < X n , 

其他场合， 


n 


/ ㈤ ( Xi ， … , x n ) 


0, 
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⑷如果/⑷=/剛 ㈤ (即随机变量足服从区间[0, 1] 上的均匀分布)，则 


r(n — p + 1) 

(n + l) 2 (n + 2)’ 


r 




(处) ， X ^) 


r < p . 


cov 


n + 1 ? 


r 


20. 设 fv 石为独立同分布的随机变量，服从正态分布 M ( m , a 2 ). 随机变量 


71 


71 


❸与 s? 


r E ( n ) 2 , 


n > 1 


n — 


i™ 1 


分别称为样本均值和样本方差.证明 


(a) Es? — a 2 . 


( b ) 样本均值 I 与样本方差4相互独立. 

( c ) f < J 2 / n ), 而 （n — l ) sf / cj 2 服从自由度为 


1 的 X 2 分布. 

21 .设 A ，…，为独立同分布的随机变量，^为与 A ， …，独立的取值于集 

合{1，…， n } 的随机变量.令& = & +… + A , 证明 


n 


D5, DX 

= EX 


Dr/ 


= JJXiEu+ {BXi) 2m Du y 


+ EX x 


Ez / ’ 


22 .设 M ( s ) = Ee sX 是随机变量 X 的矩母函数（参阅第6节第32 题). 证明，对任 

何 s > 0,都有 P{X ^ 0} ^ M ( s ). 


23. 设，…， A 为独立同分布的随机变量，心=5 0 = 0, M 

i=l 

iax Sj , M - sup 5 n . 以 C 兰 r ? 表示随机变量 $ 与 r ? 同分布.证明， 

3^ n n^O 

( a ) M n = ( M n _ i + X )+, n ^ l . 

( b ) 如果 

( c ) 如果 


m 


o < 


( P - a . s .)， 则 + 


—> oo 


< EX < 0,且 EX 2 < oo , 则 


oo 


DX - D ( S ^ X ) 


EM = 


-2 EX 


24. 在上题中的条件下，对 

(DX)/2. 

25. 设 （与 7/为相互独立的随机变量，分别具有密度函数 Mx ), rr e M 和 f v ( y ) 

Wy ) (即随机变量 7? 服从区间[0，1]上的均勻分布).证明，此时 （36) 和 （37) 


0，令 M ( e ) = sup ( S n - ne ). 证明 lim eM ( e ) — 

n^Q 40 


£ > 
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式分别具有下列 形式: 


fd x ) 


dx 


之 > 0, 


x 


hv ( z ) = 


0, 


之 < 0, 


f ^( zx ) dx , 




x 


0 


fi/v( z ) = i -1 


xf ^( x ) dx , 


之 > 1， 


2 


% 


0 


0 


z < 0. 


特别地，如果随机变量 f 也服从区间[0, 1] 上的均匀分布，贝！ ] 


Q ^ z^l 


2, 




，2 > 1， 


2 z 2 


0, 


z <0. 


26, ( a ) 设 € 与 r ? 为相互独立的随机变量，均服从参数为 A > 0的指数分布. 

证明，随机变量_服从区间 [0,1] 上的均匀分布. 

( b ) 设 f 与 r ? 为相互独立的随机变量，分别服从参数为 A 和 A 2 的指数分 
布，其中# A 2 . 证明，随机变量€ + 的密度函数 h + r ) { z ) *： 


- z/Xi 


_ z / X^i 


e 


一 e 


f (+ v ( z ) ~ 


々0, oo ) { z )^ 


入 1 — ^2 


27. 设 C 与 r ? 为相互独立的正态#(0, 1) 随机变量.证明， 

⑷随机变量 f / r / 与 i /\ r ]\ 均服从密度函数为 
( b ) 随机变量 | f |/ h | 具有密度函数 


€ R 的柯西分布 • 


霄 (1+0 )， x 

x ^ 0. 


2 


( IT ^ 2 ) 


, ， X n 为相互独立的随机变量，分别服从参数为 Ai ， …， A n 的指数分布， 


28 . 设 X 

其中 \ + 令7^ = 4 +… + X „. 证明，概率 P { T n > f } 可以表示为 

下述 形式： 


IT • 


P { T „ > t}^Yl 


一 入立 t 




试求系数 a in , i = ]_,•*- 

29. 设6乂2,".为随机变量序列，有= 0, E 技 =1. 令&二^ +…+ ^， n ^ l . 

证明，存在正数 a 和使得 


, n‘ 


P { 对某个 n 彡1，有 S n 彡 an + 6} 彡 


1 + a 6 
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30. 设随机变量 f 只可取有限个非负实数值 


. 证明， 


尤1，… 


lim ( E $ n ) V n = max ( a ： i ， … ， Xk ). 


31 .设 $ 与 r ? 都是以 { I ,--* , n } 为取值集合的相互独立的随机变量.假设或有 

E^<oo, 或有 Eq < oo. 证明， 


Emin ( C ,7?) = > fc } P { r ? > k }. 


fe —1 


32 .设心与为相互独立的随机变量，分别服从参数为 At 与 A 2 的指数分布.试 

求随机变量^与随机变量^的分布函数. 


Cl 


33. 设 X 与 y 为尺寸相同的随机矩阵，并且 EYY * 可逆.证明如下的柯西-布尼亚 

科夫斯基矩阵不 等式： 


( Exy + )( Eyy *)~ 1 ( Eyx *) ^ exx *. 

(符号 < 表示该式左端与右端的矩阵之差为非负定阵 .） 

(舍朴 （ L . Shepp )) M X 为伯努利随机变量，有 P{X = 1} = p , P{X = 0} 

1- p , 0 < p < 1. 

( a ) 证明,存在与 X 独立的随机变量乙使得 X + Y 的分布对称，即 X + Y ^ 

~(X + Y ). 

( b ) 在这样的随机变量中，找出使得 df 达到最小的随机变量 y . 

35. 设 t / 为随机变量，服从区间（0，1)上的均匀分布.证明 

( a ) 对一切 A >0, 随机变量-士 In [/ fl 艮从参数为 A 的指数分布. 

( b ) 随机变量 tan 7 r (U - I )服从以 

( c ) 随机变量 [ nC /] + 1服从集合{1，2,…， n } 上的离散均匀分布. 

⑷如果0 < g < 1，则随机变量 X - 14- 

(1 - g )， 

36. 试举例说明，存在这样的独立同分布的非负随机变量序列 ，… ，使得对任 

何 P > 0,都有 supEX ^ < oo , 但是对任何子列 ( ni , n 2 , • * •), 却都有 


34. 




€ M 为密度函数的柯西分布. 


1 


X 


7T(1+X 2 ) ’ 


服从几何分布 P{X = 


InU 


In q 


fe -1 


Q 


| supX ni < ooj 


P 


= 0 . 


37 .设 € 与 t ? 为相互独立的随机变量，分别具有分布函数 F = F{x) 和 G = 

G{x). 由性质 P{max(e,r?) ^ x} ^ P{^ ^ x}P{r] ^ x} 可以推知，随机变量 

(^V) 的分布函数为 F(x)G(x). 试从另一途径重新建立这一结论,亦即将事 
件 {max (^, T }) ^ x } 表示为事件 {$ ^ x , $ ^ 与事件 {q ^ x , ( < 7?} 的和，并 

通过条件概率来计算它们的概率.（最后一步需要用到第6节中的 （68) 式 


max 
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38. 设€与 r ? 为相互独立的随机变量，使得它们的乘积幼服从（参数为 A > 0的) 

泊松分布.证明， S 与 r ? 之一必定在集合{0, 1} 中取值. 

39. 对于标准正态 AT (0,1) 随机变量《，有 




/2 


其中 ( f ( x ) = 

(参阅第一章第 6 节第 9 题 .） 试对服从伽玛分布（见第 3 节表 3) 的随机变量 7, 
找出相应的渐近性质. 

40 •设 C 为随机变量， M a 是它的中位数集合 （按 照第一章第 4 节第 23 题⑷ 的定 

义; 那里所给出的关于离散随机变量的中位数的定义可以自动挪到任意随机变 
量上面).证明，对于任何1,只要 E | C| P < oo , 就都有 

| p -&|%2 EH 

其中 "= M ⑹ e M a . (我们指出，特别地，如果 E | e | 2 < oo , 则有^ - ECI 彡 

x /2 D ?0 

设€与 V 为相互独立的随机变量，都具有有限的二阶矩.证明，随机变量 C + r ? 
与 （- r ? 不相关的充要条件是= Dr ?. 

42. 设/与沒是 L 1 中的两个函数.用/ * g 表疋 它们的 卷积卜 / f { y ) g{x - y ) dy ), 

证明如下 的杨不 等式： 


P {0 x } 


X OO 


e 


y 27 T 


X 


41 


攀 


E 


1(/ *5) ( x)\dx ^ / \ f { x)\dx / \ g ( x )\ dx . 


R 


M 


R 


43. (22) 式给出了用 $ 的密度函数 触 来表示 r ? = 的密度函数 f v ( y ) 的么<式: 

fv(y) = fd h (y)) h \y), 


其中％) 

设/是酆中的某个开集，函数 y = if { x ) 定义在了上取值于 M ' ( BP ， 

如果3； = ($1，…，〜）6 /，则 

) 假设所有的偏导数_都存在并且连续，使得 \Mx)\ > 0, rr e 厂其 
中 j ^ x ) 是函数$的雅可比行歹 式： 


一 1 


( 2 /). 


9 


(2/1，… ，2 M )， 其中讲=… , x n ), % = 


y 




1，…， n . 


d(fi 


Jtp ( x ) = det 


1 ^ ij ^ n . 


dx ; 


3 


证明，如果 c = (6, …，匕）是取值于 J 的随机向量，具有密度函数 财 ,而 
V — f (0, 则”的密度函数 fr }( y ) 存在，并且在集合$ (/) = {y ： y — f ⑷， x ^ 1} 
上， fv(v) 的值由如下公式给出： 


fv(y) = fd h (y))\My)\^ 
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其中 /i = 9? _ i 是9?的反函数（并且，由于 I ⑻I > 0,故而 | > 0). 

提示： 运用多元积分的换元公式（第6节第74题)，在其中令以 ㈣ 
G (( f ( x )) f ^( x ), 其中 G 是恰当选取的函数. 

44. 设 I ? = + 丑，其中 S = (6 ■，…，匕)， 

| det ^| > 0,而5为 n 维向量.证明 


(Vir * * ，加 ) ， 4 为 


方阵，有 


V 


n x n 




fv(y )= 


| det ^4| 


提示：令 ip ( x ) — Ax -f 利用上面第 43 题的结论，并需证明 \ Jtp - i ( y )\ 


l /| det 4|. 


45. ( a ) 设 C 与 W 为随机变量，它们的相关系数是 p(f »?)• 证明 


p ( ciC + c 2 , c 3 t ) + c 4 ) = p[H sign ( cic 3 ) ? 


其中 


1 


x > 0, 


sign ( a :) =： < 0, 


x = 0, 


—1， ic <C 0. 


( b ) 设为随机变量，相应的各相关系数分别为 p ( Ci , 0)? ^ ^ J - 


证明 


p(ii + 6, 6 4-^4)- Wu 6) + p(Ci , U)] 4- d 6) + p(6, e 4 )]. 

46. 设 x = (&，■ •■ , x n ), d 为高斯向量，它的各个分量是独立同分布的正态随 

机变量 Xi 〜 卿 y a 2 ), i = 1， ... ， n , 我们来考察向量 JC = ( X U ...， X n ) 的球坐 
标丑，$1，…，伞 n - i ， 亦即，令 H 彡0, € [0,2 tt ), 1彡 i 彡 n - 1,和 


Xi = Hsin^i, 

Xm — Rsin cos $ 
X n ^i = i ? sin$ n -i cos 
X n = Rcos COS 


• * cos $ 


2 ^ m < n — 1, 


771—1 * 


1， 


… cos $ 


-2 • 


1， 


• • COS ^ i . 


一 2 • 


证明，随机向量 ( R ， u … 的密度函数 /( r ， 

给出（其中 r > 0, (fi € [0, 2丌 )， i = 1 ，…， n - 1 ， n 彡 2): 


? ^ i ) 由如下的公式 






4 • * 


2 


r 


n— 1 


r 


exp 


2 cr 2 


n—2 


n — 3 


/( r ， fl ， … 


cos 


ipl cos 


P2 … cos 外一 2 . 


(27r) n / 2 <j 


n 


- 1 
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47 . 设 X 为取值于区间 [0,1] 的随机变量，它的分布函数为康托尔函数（见第3节). 

试求它的矩 EX ' n ^ l . 

48. ⑷证明，下列各函数都是分布 函数： 

F g (x) = exp (— e — x ) 


G M ; 


x 


0, 


x < 0, 


其中 a > 0; 


F f (x) 


exp (— x — a )， a : > 0, 

exp (—| a ;| _Qf ) > x < 0, 


其中 a > 0 ? 


F ^/{ x )= 


a ; ^ 0, 


其中， F g ( x ) 被称为冈贝尔 （ Gumbel ) 分布 （或二重指 数分布 ， 试比较第17题)， 
F f { x ) 被称为 弗雷歇 ( Frechet ) 分布， F w { x ) 被称为 韦布尔 （ Weibull ) 分布， 由它 
们所生成的如下三种类型的分布巧，巧， F m ， 在极值理论中起着重要 作用： 

I 型分布（冈贝尔型分 布)： 


Fi ( x ) = Fq( ax + &)， a > 0, 6 € M ; 


I 型分布（弗雷歇型分 布): 


丹 ㈤ = Fp(ax + 6), a > 0 ? 6 G M ; 


HI 型分布(韦布尔型分布): 


Fm ( x ) = F w (ax + b ), 

( b ) 证明，如果随机变量 X 具有 II 型分布，则随机变量 

y = ln(X — 〆 ） 

具有 I 型分布.相应地，如果随机变量 X 具有 III 型分布，则随机变量 

— In ( 芦一 X) 


> 0, 6 e 


a 


Y 




具有 i 型分布. 

注： 这些性质告诉我们， i 型分布在“极值理论”中起着决定性的作用，因 
此, I 型分布有时也被称 为极值分布. 

49. (阶乘矩） 设 X 为随机变量,其阶乘矩 m ( r ) 的定 义是： 

EX(X — l )〜（ X - r + l )， 


1，2,… 


?n( r ) 


r 








亦即 m (r) = E ⑷ 

设随机变量 x ) R 从参数为 a 〉0的泊松分布.对于 
试对一切正整数 r ， 求出 m (r) . 


r ■ 


3,我们有爪⑶= A , 


m 
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设随机变 量^与 ％相互独立，均服从区间 [0,2 tt ) 上的均匀分布.令 Xi = 


50. 


COS 9\ , X2 = COS 02, 


证明 


(X 1 + X 2 ) 1 ^ x,x 2 , 


2 


其中，与 4 的含义相同，都表示“同分布”. 


51. 设随机变量0 )1 从区间 [0,2 tt ) 上的均匀分布，随机变量 C 服从密度函数为 

的柯西分布. 

( a ) 证明，随机变量 ⑺ s 2 0 与随机变量同分布（或者简记为 


(1 十 a : 2 )， X 


7T 




2 


COS 




( b ) 证明 ， cot f _ C . 

( c ) 试求随机变量 sin (0 + < p ) 与 atan ^ 的分布密度函数,其中 cp € M , a > 0. 

52. 设随机变量$服从标准指数分布,意即 PU > 0 = t ^ 0,而随机变量 N 

月艮从标准正态分布，即 iV 〜 A /*(0, 1)，且 iV 与$相互独立.证明 


e 1 - V^\ni 

意即随机变量€的分布 Law ⑹与随机变量 y /2^\ N \ 的分布 Law ( v ^?| iV |) 相同. 

53. 设 X 为随机变量，所取之值为0，1，..， ， iV ， 它的二项矩为 b 0 ， b u …， b N (其中 

b k = C k x = ^ E { X) k = ^ EX{X — 1 ) …(X _ + 1); 参阅附录中的第3节) • 

证明， X 的母函数为 


N 


N 


N 


- 1卜; （ ！> i )“ 哪 j , 

n=0 


X 


G x ( s ) = Es 


k=n 


k=0 


因而，对每个 n = 0,1，…， iV ， 都有 


N 




k=n 


54. 设随机变量 X 与 Y 独立同分布，都服从区间 [0,1] 上的均匀分布.证明，随机 


变量 


如果0彡 X + Y 彡1， 

(x + y )- i , 如果 1 < x + y 彡 2 


X + Y , 


Z 


也服从区间 [0,1] 上的均匀分布. 

55. 设随机变量 ， X n 独立同分布，都服从集合 {0,1,2} 上的均匀分布（即取 

其中每个值的概率都是 1/3) .令 


Pn(&) = P { 义 1 + • ■ ■ + X n = k}^ 0 ^ A: ^ 2n, 
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试求出 P n { k ) 的一般表达式 • （例 如: 仏⑴= n ，3_ n , P n {2) - C 2 +1 -3- n , P n (5) 




(^ +4 -nC2 +1 ).3-) 


56. 设 f 与 r ? 是任意两个随机变量，有 E ^ 2 < oo , Er? 2 < oo . 证明， 

( a ) D (^ 土 77 ) = + Dr / 土 2 cov (^, rj ), 

( b ) 如果 f 与 r ? 相互独立,则有 


D ( ㈤ 二 DC Dr ? + 陶 2 + Dr ?. ( EC ) 2 . 


(亦可参阅第 69 题中的命题 .） 

57. 设随机变量对（ X ， Y ) 的密度函数 f ( x ， y ) 是球对称的，即对某个密度函数 

g ( z ), z > 0,有 


9 = 


/(^ v) = 9{^ 2 + y 2 )- 

设丑与 6> 是（ X ， Y ) 的极坐标，即 X = Rcose , Y = Rsin 6. 证明，0服从区间 
[0, 2 tt ) 上的均匀分布，而丑具有密度函数％) = 2 nrg ( r 2 ). 

58. 设随机变量对（ X ， F ) 具有密度函数.定义复值随机变量 


Z = X + iF , Zt = Ze lt , teR . 


证明，对任何 t ^ R , Z t 服从同一个分布的必要条件是： /( x , y ) 具有 f ( x , y ) = 
9 ( x 2 + y 2 ) 的形式,其中，与上题一样，#是某个密度函数. 

59. 设随机变量《与7?独立同分布，具有指数分布密度函数 /( a :) = Ae 

证明，随机变量 ⑴与训 相互独立. 

60. 设随机变量 《与 r / 相互独立,分别具有密度函数 


—入 X 


，： r > 0. 


右， 


y 


与 fv ( y ) 


f ^{ x ) ~ 


X < 1 


y > 0 ， cr > 0 - 




=: 




cr 2 


vi 


2 


7T 


— X 


证明，随机变量幼的分布是正态分布 AT (0 ? a 2 ). 

随机矩阵，它的所有（随机）元素独立同分布，均为 P {^ = 
土 1} = 1/2. 证明，该随机矩阵的行列式的均值与方差分别为0和 n !. 

62. 设 A ， X 2 ，…为独立同分布的随机变量序列，共同的分布为区间丨0，1]上的均 

匀分布.证明， 


61•设 为 


n x n 


一 1 


71 


71 


2 


e E ^ 2 


71 4 DO, 


>3, 


k=l 


k=l 


63. 设随机向量 X = { X U X 2) X 3 ) 服从如下的四面体中的均匀 分布: 


s 3 = {{xi,x 2 ) X 3 ) : Xi ^0, x 2 > 0, X 3 >0 ， X 1 +X 2 + X 3 ^ c } ? 
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其中 c > ()• 试根据 X 二 { X 1 , x 2 , x 3 ) 的分布，分别求出随机变量 Xi 与随机向 
量 { X U X 2 ) 的分布.（这两个分布均称为 { X ll X 2 l X 3 ) 的边 缘分布 .） 

提示: 首先证明 X = { X u X 2 i X 3 ) 的密度函数是 y - 1 , 其中 F 
是 S 3 的体积，其值为 c 3 /6. 再由此出发,推出二元（边缘）密度为 f { x u x 2 ) = 
6( c - xi - x 2 )/ c , 最后再求出（一元边缘）密度 f { x \). 

64. 设 A ，…， X n 为独立同分布的正值随机变量，有 EX ! = EXf 

= X ： + ■ • * 4- X m , 1 彡 m 彡 n . 证明， 

⑷ ES - 1 ^ 

( b ) EXiS - 1 = 1/ n , kl ， … 

( c ) ESmS - 1 

65. (狄 利克雷分布） 在第 3 节表3中，（参数为 a >0, /3 > 0 ) 的贝塔分布被定义为 

区间 [0,1] 上的具有如下的密度函数的 分布： 


令 


r . 


r . 


? n . 


/ n ， 如果 m 彡 
1 + (n — m ) E 5~ 1 ) 如果 m < n . 


=m 


n . 




f ( x \ a , 0 )= 


B ( a , 0) 


其中 


r(a + 0) 


1 (1 — x)^~~ l dx [= 


而 r ( a ) 


B ( a , (3) 


a— 


ot— 


—x 


dx . 


X 


X 


e 




r ㈣ r ⑹ 


0 


0 


多元贝塔分布 就是狄利克雷分布，它是集合 


△fc— 1 = {( 工 1，’ ’ • ， ifc -1 ) : 工 i ^ 0^ 0 ^ X\ + * • * + -I < 1 }， > 2 


上的具有如下的密度函数的 分布: 


/( 灼， … 

r(ai H - hQfc ) 

r ( a 1 )-^ T ( a k ) 




， 1 j ^1 ? ‘ 




叫一1一1 

k —1 


ot\ _1 




X 


… X 


其中 ai > 0, i = 1， • • • ， fc , (有时也将该分布定义在单形4 ( XI ，…， a ； fc ) :恥 > 0, 


k 


之上，此时其“密度函数”为 


Yj x i = 

i=l 


r(ai H - h Qfc ) Ql 

_ r( ai )...r ( 叫 ) 1 

注意，此处我们用了带引号的“密度函数”，因为，虽然函数 f ( x lr 

a k ) 的形式唯一确定，但是它却不是关于中的勒贝格测度的密度 .) 


/( 尤1，一 


5 1 ， Ctfe ) 


Ot k 


‘, Xfc 一 1; Q ； 1 ，• ， 


• X 




fc , 


，工 fc—1 ，， 


* • 


… , 叫一 1 ， 
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设 X 二 ( X ir , X fc ) 为随机向量，有不 > 0和叉 i +…+ Xfc = 1，服从狄 
利克雷分布，在 A fe _! 上面具有密度函数 /(X!,... 

是义1，…，的密度函数，其含乂是：将 （ Xl ，…， Xfc ) 中的最后一 "个 随机变 
量為表示为 Xfc = 1 - (Xi + ■. • + x k ~\), 从而只剩下 fc — 1个随机变量 

( a ) 证明 


， , Q ； fe-l,Q ； fc ) (这 


尤 fe—l; 0^1 ) 


# • 


k 


\i=l 


a j 


a 3 


EX ;= 


， = 


2 


fc 


k 


k 


2^ oti 


E«i E«i + i 

i=l / \ i=l 


^jfi aj 


cov ( Xj t , Xj 2 )= — 


2 


， ii # 知 


2 


fc 


k 


E«i E«i + i 

i=l / \ i=l 

我们有 


( b ) 证明，对非负数 


，…， nt 


k 


k 


r ( E ) n r K + ri ) 

\ i=l / i —1 


1? Y ri Y r ^ 


k 


k 


n r(ai)r [ E(«t+ ^) 

i=l \ t=l 


( c ) 试求随机变量 Xfc 关于 Xi ，…的条件密度函数 fx 


Xi ，… 9 Xk-i 


k 


(Xfc j X \, • • ■ ， Xfc—i)* 


66 .设 X 为随机变量.称如下的函数为 X 的浓度 函数: 


Q { X ; l ) = supP{x < X ^ x I > 0* 




( a ) 证明，如果随机变量叉与 y 相互独立，则对一切 Z > 0 

Q(X + Y - l )^ min ( Q ( X ; 0, Q ( Y ; l )). 

( b ) 试找出打，使得 Q ( X ; l ) = P 何 <X 并证明， X 的分布函 

数连续，当且仅当 Q ( X ; 0) = 0. 

提示：⑷应当指出，如果 X 与 Y 的分布函数分别为与仵，则有 


P { z<X +Y ^z + l } = 


[ F x{z + l - y ) ~ Fx{z - y )} dF Y { y ), 


— oo 


67. 设随机变量 M { m , a 2 )( 意即随机变量 $ 服从参数为 m 与 a 2 的正态分布). 

令 r / == 3为 对数正态随机变量, 则根据第8节中的 （23) 式,其密度函数为 

(m - In y ) 


2- 


， y > o , 


exp 


2 a 2 


fn{x) — < Vinery 


0, 


2/^0. 
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现对 ae [-1，1],构造函数 


fv ( y ){ 1 - asin [7 rcr~ 2 (m - lny ) j |, y > 0, 

2/^0. 

( a ) 证明，函数/⑷⑼是密度函数，意即/ ㈤ ⑼ > 0且 / Q °° /⑷⑼办= 1. 

( b ) 设随机变量 c 具有密度函数 fc ( y ) = / ( a ) ( y ), a ^ o . 证明，随机变量 
与 C 的所有各阶矩全都对应相等，即 ErT = EC , n > 1. (事实上，对数正态分 
布具有一切阶矩，但是不能为这些矩所唯一确定. ） 

68•设 ( en ) n ^ o 为独立同分布随机变量序列，其分布对称，令心= 0, & = +…+ 

in , n > 1,定义最大部分和序列 M = ( M n ) n>0 ： 


f {a) (y)= 


0, 






V 


max { S 0 , Si r - , S n ), 


n 


与最小部分和序列 m = ( m n ) n ^ 0 ： 


= min ( S 0) S lr - , S n ). 

证明（此为第一章第 10 节第7题的推 广)： 对任何 n 5 都有 


m 


n 


s n ) (- m n5 M n , S n ) ^ ( M n , 


S n 一 


Sn ). 


m 


—m 


ri) 


ny 


即所述三个随机向量的分布相同. 

提示:利用如下的容易验证的性质：对任何 71 ， 都有 


{S n - S n - k ; k^n) l = (S k ； k ^ n). 
69. 设 € 与 r / 为随机变量，有< oo 和 D77 < oo , 证明， 

cov 2 (^, 7 ]) ^ D^Dr/, 


并说明等号成立的条件. 

TO . 设6,…，^为独立同分布的随机变量.证明 


P { min ( Ci , ••- ,$ n ) =6} = n~ l 


并证明，随机变量 min (^1,--- 乂 n ) 与/ 

71. 设随机变量 X 的分布函数是 F 而 C 为常数.试求下列各随机变量的 

分布函数： 


相互独立. 


{^i=min ( 《 1，… ，《 n )} 


X ，如果 | X | < c ， 
0，如果 | x | > a 


C 


X V C = max ( X ， （7 )，X AC = min ( X ， C )，X 
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证明 


72 •设叉为随机变量 ， A > 0,而 ( p ( x ) = 


X 


1 +X ‘ 


恥 ( m A ) 


E [^(| X | a ) - ^ A )] < P {\ X \ 


if ( x X ) 


73. 设随机变量 f 与 r ? 相互独立,分别服从参数为（叫，灼和（《 2 ,灼的伽玛分布 

(参阅第3节表 3 ).证明， 

( a ) 随机变量《+ r ? 与南相互独立. 

( b ) 随机 变量表 服从参数为 ( a u a 2 ) 的贝塔分布（参阅第3节表 3). 

74. (取胜概率随机的伯努利模型）设 Cl , … ，€ n 与 7 T 为随机变量,其中 7 T 服从区间 

(0,1) 上的均匀分布，而匕 i = 1，… 




均以下述条件概率取1和0两个值: 


，几， 


p } 二 1 - P ， 


p } 


Pte = 0 


pfe = 1 

并且条件独立，即 （7 T - a . S . 地）有 


7T 


7T 


P ， 




| 7T} = P{^1 = Xi I 7r} … P{?n = X n I 7r} 5 


P{Cl = $1 ， … An = 


X 


n 


此处及下面，对 i = 1，…， n ， 均有心 = 0, 1. 


证明 


( a ) 无条件概率 


.‘ = 3： n } — 


P{Cl 


XI， . 




(n + l ) Q ， 


其中 


XI + … • + x n . 


X 




( b ) 随机变量 5 n = ei + -**+ Cn 服从集合{0,1，…， n } 中的离散均匀分布. 

( c ) 条件分布 P {? r 彡 p 丨^ = xi ，•. 

XI + * * * + Xn} 相同 ， p G (0, 1). 

( d ) 分布 P {7 T ^ p I S n = x }, 其中 


■ ^n = X n } 与条件分布 P{?r ^ p \ Sn = 


具有密度 


X — X\ H - h x 


ri7 


/咐> 卜 ） =(n + l ) q ^( l - P 广-' 


并且 E (7 T I = x ) — n+2 , 

75. 设 f 与 ?? 为独立同分布的非负随机变量，有 P 仪 = 0} < 1. 假设 min (^, rj ) 与 

e /2 同分布.证明， c 与是指数分布随机变量. 

提示：由关系式 


X + 1 


( P{C > ^}) 2 = P{min (^, t])> x } = P {^ > 2 x} y 

可以推出 ( P { e > x}) 2n = P{e > 2 nx }. 由此可知，对一切 a >0 和非负有理数 
都有 P{C > x } 

>0,都有 P{C > x } = 


A # a , 其中 A = - lnP { C > a }, 接下来不难推知，对任何 




e 


X, 


—Ax/a 


e 


x 
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T 6. 设 《与 r / 为独立同分布的随机变量，具有分布函数 F = F ( a :). 证明, 


x6K 


(试比较第 i 2 节第 2 o 题 .） 

77.设 A ， …，为随机变量，证明，如下的（关于随机变量最大值的）容斥公式 

(试比较第一章第1节第12题和第4节第9题)： 


71 


E 

i=l 


max ( X\ y …， X 


min ( X ix , X i2 ) 


n 


E 


min , Xi 2J Xi 3 ) + … + (— l ) n+1 min (&，•，‘ , X n ). 




并通过选择恰当的 X 
的容斥公式.（参阅已经提到的第一章第1节第12题和第4节第9题 .） 

78. 设《1，《2,…为独立同分布的随机变量序列，有 P{fi = 1} = P{(i = -1} = 1/2. 

令 Z n (uj) = IJ 2 及 Zoo ( w ) = lim Z n ( u )). 

k —1 n—oo 

证明，分奋函数 F ( x ) = PizM ^ x } 是康托尔函数（参阅第 3 节).（事实 
上，可以把 Law (^)视为康托尔集上的康托尔测度 .） 随机变量 
所谓奇异随机变量的例子（其分布函数既不是离散的,也不是绝对连 续的， 见第 
3节第18 题). 

79. 证明，在二项情形下（第一章第2节第1小节及《概率》第一卷第162页中的 

表 2 ),分布函数 


由现在的容斥公式推出关于概率 P ( AL > • - UA n ) 




I ■ 


nj 


( to ) 是 


么 OO = 之 OO 


m 


Bn ( m ] P ) = Y 1 C nP k( i 


n—k 


0 < m 彡 n ， 


fc =0 


可以通过（不完全) 贝塔函数 表示为 


-1 


P ) ~ : 


m 


(1-$) 


n—m 


dx ^ 


X 


B(m +1 ， n — m ) 


p 


其中 


mm 


x 9 ' 1 {l - xf - 1 d 


1 


而 r ( p ) = 


B(p，g) 




—X 


dx - 


x 


: e 


r(p + g) 


0 


0 


m . 

80. 证明，泊松分布函数 F ( m ; A ) = E e - x 杳， 其中 m = 0，1， 2 ，...， 可以通过（不 

完全）伽玛函数表 7 TC 为 


k—0 


F(m； A)= ^i 


x m e~ x 


dx . 


A 


L 
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在利用均值与方差对分布的密度函数 / = / Or ) 进行描述时，有两个标准化的特 

征参数, 一 1 个是偏度系数 ( skewness ): 


81 


攀 


Ms 


0^3 — ? 


还有一^个是峰度系数 （ peakedness ， kurtosis ): 


M 4 




其中 fjLk = f{x - fi ) k f ( x ) dx , fji = f xf ( x ) dx , 

试对表 3 中所列出的分布讨论它们的参数 a 3 和 


2 


a 


= M 2* 


Q ： 4. 


82. 设随机变量 X 从参数为 n 和 P 的二项分布（见《概率》第一卷第 162 页中 

的表 2). 证明，对于它，按照自然方式（与第81题的定义方式类似）所定义的 

偏度系数 


U 




3 


E ( X - EX ) 


skw { X ) 


«3 






( DX ) 3 / 2 


满足下式 (g = 1 - p ): 


Q-P 


skw ( X )=： 


(如果 0 < p < 1/2,则 skw ( X ) > 0; 此时我们说，分布具有右部“长尾 ”.） 再求该 
分布的峰度系数： kur ( X ) 

83. 设随机变量 , Cn 独立同分布，分别具有偏度系数吻 （= Skw ( ei )) 和峰度 

系数 a 4 kur ($ i )). 证明 


4 


_ E(X-EX) 


«4 




5 


(DX) 


skw($i + • * * + Cn ) = n ~ 1/2 skw (^ i ) 


和 


kur(^i + * * * + Cn) = 3 + n _1 {kur(^i) - 3}. 

在引入二项分布的时候，试验次数 n 是给定的，人们考察的是概率 P n { i / - r }, 
亦即在 n 次试验中，成功的次数 P 等于 r 的概率.（该概率为 ¥ n {v = r } 
C ^ p r q n ~ r , 0 ^ r ^ n , 其中， p 是每次试验成功的概率，由此对所给定的 n 形 
成二项分布 .） 负二项分布 （反 二项分布） P r { r - 耐 (亦称为 帕斯卡分布） 则是产 
生于这样的问题 ：“第 r 次成功首先出现在第 r = k (^ r ) 次试验中的概率是多 
少?”试证明， 


84 




P r {r ^ k } = C r k Z \ p r q k 


一 r 


= r，r + 1，…， 




其中 r = 1,2, ••• ( p 是每次试验中成功的概率).（根据定义，对于给定的 r ， 这些 
关于= r , r + 1，…的概率 pr { r ^ k } 就形成了负二项分布 .） 证明，（对于给定 

的 r ) 有 Wt — rq / p . 
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85. 称取值于集合 {1,2,--.} 的随机变量€服从参数为 P > 0的（离散的）帕雷托 

( Pareto ) 分布，如果 


C 


p{e = ^}= 


砂十 1 • 


证明 


C(p) 


EC = 


c = 


C(p +1) 

其中 C (4 = 是黎曼 C 函数. （亦可参阅第三章第 6 节第23题关于连续 

的帕雷托分介绍 


C(p +1) 


86. 设^，…，匕为独立同分布的随机变量，具有分布函数卩 ㈤ 卟该分布依赖于某 

个（随机）参数沒，而具有某个类 jt 中的先验分布 n (0), 设 n (6»| xi , ••- , x n ) 
是根据 fl , …的观察值 

果后验分布仍然属于类 JT ， 我们就说， JT 中的分布 n (6>) 与分布 F(x I e ) 是共 


按照贝叶斯公式计算出的后验分布.如 


尤1， • • • ， T 


n 


扼的 • 


证明 


( a ) 如果外 |沒)〜 A 1 )， 并且 n ⑻〜 Af ( mo , f 1 )， 贝 ! I 


i > orn 0 + a 0 (xi H - + x n ) 


1 


U (6\ xi ^-， x n )〜Af 


， 6o + naQ J 


bo + naQ 


⑻如果外 10) 〜 AT ( o , 6-% 并且 n ⑻〜 r ( fc ; a ), 即服从密度函数如下的 
伽玛 分布： 


X k x k ^ 


— Aa : 


e 


l(k;X){x)= 


^[0, oo )(^) 


m 


其中 k >0, A > 0 5 贝 lj 


4)) 


n (沒 I 工 i ， * • • ， 3： n) 〜 r {fc + a + — { x \ + … + 


2 


2 


( c ) 如果 F (. I 0) 〜 exp ⑹，即服从参数为沒的指数分布，而 nr ( fc ; A )， 


则 


n (01 抑，… , x n ) ^ T(k + n ; A + (Xi + … + x n )). 

(d) 如果 F(. I 0) 〜 Poisson ⑹，而 II ⑻〜 r(fc; 入 ) ，贝 ！ ] 

11( 沒 \ xi ^- , x n ) ^ T(k + { x \ + • - - x n ); A + n ). 


( e ) 如果 F (. |0) 〜 Bernoulli ⑼，而 U {9) - B ( fe ; L ), 即服从密度函数如下的 
贝塔 分布： 


fe — 1 


L-l 


i l ~ x ) 


X 


0( k ; L )( x )= 


Ao ， i)0 )， 


B { k ; L ) 


则 


n (0 I XI ， …， x n ) ^ B ( A : + (xi + • * * + x n ); L + n - (xi +*• •+ a : n )) • 
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87. 设随机变量 X fll 从下列分布 之一: 二项分布，泊松分布，几何分布，负二项分布， 

帕雷托分布.试求事件{ X 为偶数 } 的概率.（例如， X 服从参数为 P 的几何分布 
(参阅《概率》第一卷第16 2 页中的表 2 )，则 P { X 为偶数 } = 

88. 设随机变量匕，…， Cn 相互独立,分别服从参数为 A !,.--, A n 的指数 分布. 

(a) 证明， P{Ci < € 2 } = Ai/(Ai + 入 2 ). 

( b ) 证明，随机变量 min ^ Mi 人参数为 f ： Afc 的指数分布,并由 （ a ) 推出: 

l ^ k^n 


k~l 




n 


E A fc 


fc— 1 


( c ) mR Xi / i ^ j y 试求随机变量 6 + • • • + 的分布密度 （n = 2 的 
情形见第 26 题). 

⑷证明 ， E min 而， 6) = 1/( A x + A 2 ), 并求 E 

( e ) 试求随机变量匕 - 6的分布密度 ■ 

( f ) 证明，随机变量 min (《 1 ，《 2 )与 Ci - € 2 相互独立. 

89. 设随机变量 X 服从密度函数如下的贝塔 分布： 


( Ci , 6) - 


max 


r(a + 0) 




/(工； a ， /3) 


a — 


o < 怎 < 1， 


X 


r ㈣ r ⑽ 


其中 a > 0, /3 > 0. 证明， 


a /3 


a 


EX = 


DX = 


+ 0， 


(a + /3 + l)(a + /3) 2# 


a 


§9. 建立具有给定有限维分布的过程 

1. 设 n = [0, 1], 多为区间 [0,1] 中的博雷尔集合类, P 为区间 [0,1] 上的勒贝格测 
度.证明，概率空间 （ n , 多， p ) 在下述意义上是普适的：对于任何给定的分布函 
数 F ( x ), 都可以在 ㈣ 多， P ) 上构造出随机变量€ = e ( cj ), ojeQ , 使得它的分 
布函数 F c ( x )- P { C < x } 就是 F { x ). 

提示：应当令 = 1^ _1 « 其中 i ^ 1 ^) = sup{:r : < w }， 0 < cj < • 

1;而€⑼与^⑴可以任取. 

2. 验证定理1和2的推论中的分布族的相容性. 

3. 试从定理1推出定理2的推论4中的命题. 

提示： 请注意，由 （16) 式所定义的测度形成相容的分布族， 

4 •设 仏是 T„(n > 1) 的分布函数（见第4小 节). 证明， F n +1 ( t ) = fF n ( t ~ 

0 

) dF ( s ), n > 1，其中朽 =K 


$ 
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5. 证明， V { N t ^ n } = F n ( t ) - F n +1 ( t ) (参阅 (17)). 

6. 证明，第4小节中所引人的更新函数 m ( t ) 满足更新 方程: 


m { t ) = F ( t ) + / m(t — x ) dF ( x ). 


w 


o 


7. 证明，方程 （*) 在有限区间中的有界函数类中的唯一解是 (20) 式所定义的函数. 

8. 设 I 1 为任一集合. 


( a ) 假设对每个 i € T 1 , 都给定了某个概率空间多 t ， P t ). 令 Q = 

n 〜多 


n 爲.证明，在⑺，多）上存在唯一的概率测度 p ， 使得如下 




ter 


t£T 


的独立性成立: 


( n 历 )= np ⑻ 

\tGT / t£T 


P 


其中集合莰 te T , 并且对所有的 t e T 1 , 都有历 = a ， 包括其个数有限 
的情形. 


提示 •• 将测度 P 定义在适当的代数上面，并运用约内斯库-图尔其定理中 
的证明方法. 

( b ) 假设对每个 t e T 1 都给定了一个可测空间（馬，戽）和它上面的概率 P t . 
证明如下的（洛姆尼斯基-乌拉姆） 结果: 存在概率空间 （ Q , Jr P ) 和独立随机 

元 ( Xt ) teT , 使得 見为 多/爲可测，并且 v { x t eB } = Pt ( B ), B e eft . 


§10. 随机变量序列收敛的各种形式 

1. 运用定理5,证明，可以把第6节中的定理3和定理4中的几乎必然收敛换为 
依概率收敛. 

提示： 如果^孓6 | 匕 | < %而 E | e n - 卢0,则可找到 e >0 和自然数 
子列 { n k ) k ^ u 使得 > e . 但 是“三 f 故由定理 5 知，存在这样的自 
然数子列 ( k ) 灿 使得^~ ( P - a . s .). 接下来再运用第6节中的定理3,导 
岀与假设 E|^ n -Cl A 0 的矛盾. 

2. 证明，空间是完备的. 

提示：在空间中取基本列，意即对于71 < m 和 
条件 H _ Cn ||^< a n 的随机变量序列（心) 咕 ，令 

如果 Um ^ n ( u ) 

如果 lim ^ n ( a ;) 


)，满足 


> 0 (n 


a 


— > oo 


< 00 


伽) 


0, 


00 . 




证明， CM 是随机变量，且当 


时，有 II ? — Cn | U °° ( 


0 . 


n — > oo 
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证明，如果^二$同时^三 r /， 则 C 与7?相互等价(意即 PU ^ V } = 0). 
设^三 C ， 恥戈％ 并且€与 T ] 相互等价.证明，对任何 e > 0,都有 


3- 


4, 


P{|《n — ”n| ^ 0, 


n oo . 


« Cn - C , T, n 4 v . 证明，如果 

也 V ) (斯鲁斯基引理). 

提示：对任给的£ > 0,选取 C > 0,使得 


P 


< p { x , y ) 是连续函数，则有 魏 Vn ) 


5. 


9 




P{|Cn| > C} <£, P{M > C} <€, 

P{ki > c } <€, P {| t ?[ > c } <£. 


彡1， 


n 


由于 p 幻连续，所以它在紧集 [- C ， c ] X [- C ， c ] 上面一致连续，因此，存在 

<5 > 0,使得只要 x,y G [- c , c ] x [- c , c ], 并且 p ( x , y ) < 就有 | v ?( x ) - c ^( y )| < 
(此处，对于 x = (工⑴, x( 2 ))，y = (y ⑴ ， 2/( 2 ))， 有 p ( x , y ) 

^ 2) |)-) 进而，再利用 


(|x ⑴ 一 


max 


e. 


y ⑴ 1， I 


( 2 ) _ 


x 


p {|^( Cn , r ) n ) - 7 ?)I ^ e } < P {[? n | > c } + P {| r ? n | > c } 

+ P{|el >4 + P(W > c }+ P{|^n - el > ^ + P(hn - > S }, 

即可证得，对于充分大的 n ， 上式右端小于 6 e . 

设（匕- C ) 2 - o . 证明沒 
7. 证明，如果& 土 <7, 其中 C 为常数，则成立依概率收敛性，亦即 


6 . 


d 


P 


In 4 C 今 in C. 


) + . 我们有 


|x-CI 


提示：任取£ > 0,考察函数 f e ( x ) = ^1 

PdCn - C \^ e }^ E / 恭）— EMC ) 
8 .设 (^ n ) n ^ l 为随机变量序列，对某 P > 0,有£ B\^ n \P 

n=l 

( P - a . s ,) 


L 


r= 


证明 ， Cn 


0 


< 00 , 




提示： 利用切比雪夫不等式和博雷尔-坎泰利引理. 


9 .设 ( C n ) n > l 为独立同分布随机变量序列.证明如下各蕴涵 关系: 


E p {l6l > 叫 


E |6| < 


<00 ， e > 0 


00 公 


Cn 


Cn 




- ^ 0 ( P - a ， s ，）. 

71 


> e } < oo ， e > 0 




L 
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提示： 利用下面的易于验证的不等式 


n=l n=l 


e 


10 .设 (^ n ) n ^ l 为随机变量序列,？为某个随机变量. 

(a) 假设对每个 e > 0,都有 P{|Cn e i.o.} = 0. 证明，^ (P-a.s.). 

(b) 假设存在子列 ( n k ), 使得当 A: 


时，有 in 

\^l ~ ?n fc _i I 0 (P-a.S.). 证明， fn — € (P-a.s.). 


^ (P-a,s.) 和 


— 00 


max 

nk-i<l^rik 


(c) 假设 in (P-a.s.). 证明,此时⑷的逆命题成立，即对任何 e > 0, 都 

有 P{lCn — 剞彡 e i . o .} =0. 

11. 在所有随机变量的集合中定义 “ d 距离”，令 


\i~v 


啦， n ) = E 


1 + Id ’ 


并将几乎必然相等的随机变量视为相同.证明，距离”的确是一种距离,并证 

明，依概率收敛等价于按该种距离收敛. 

提示： 验证三角形不等式，并对任何 e > 0,证明下述不 等式： 


ICn Cl 


£ 


P{|Cn — Cl > e} < E 


< e P{ICn — C| ^ S：} + P{|Cn ~ f| > e}， 


1 + |fn — C| 


12. 证明，在所有随机变量的集合中不存在这样的距离，使得按该种距离收敛等价 

于几乎必然收敛. 

提示： 假设存在某种距离 p , 使得按其收敛蕴涵几乎必然收敛，我们来考察 
这样的随机变量序列（匕)心 1 :对其有匕三0 和匕 户0 ( P - a . s .). 此时显然可 
以找到某个£ > 0和某个子列 ( rifc ) fc ^ i , 使得 p ( Cn fc5 0) > e , 但是却有 f nfc 二 0. 
再由定理5,即可导出与蕴涵几乎必然收敛的距离 p 的存在性的矛盾. 

13. i ^ X 1 ^ X 2 ^--- : KX n ^ X . 证明，此时我们有 X n — X ( P - a . s ,). 

14. 设 ( X n ) n ^ 为随机变量序列.证明， 

( a ) X n —> 0 ( P - a . s .) Snjifi ―> 0 ( P - a . s .), 其中 》9 n =+ • ’，+ A " n . 

(b) 如果 P 彡 1, 则 


s n /^ ^ o > 但是 一 般来说,有 




0彳 


Sn L p 


L p 


X n —^ 0 弄 — 


0. 


n 


( c ) X n 4 o , 一般来说,不能蕴涵 S n /n ^ 0 (试比较第34题中的断言). 


15 .设⑹，多, P) 为概率空间，且忍忿 I 证明，如果测度 P 是原子的，则亦概率 

为1地有 X 




X . (参阅第二章第 3 节第 35 题关于原子概率测度的定义 .) 
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16. 根据博雷尔-坎泰$引理中的断言 a) (亦称为博 雷尔-坎泰利第一引 理)，如果对 

任何 e > 0, 都有 E p {| Cn | > e} < 00 , 则有 — 0 (P-a.s.). 试举例说明，存在 

71—1 

随机变量匕 — 0 ( P - a . s .), 然而却有史 P{|U > e } = oo 


e > 0. 


17. (关于博雷尔-坎泰利引理中的断言 b ) (亦称为 博雷尔-坎泰利第二引理 )） 设0 = 

(0,1)，，=溪((0,1))， p 为勒贝格测度.我们来考察事件人= (0,1/ n ). 证明， 

E P (^ n ) = oo , 但是对于区间 (0,1) 中的每个％都只可能属于有限个集合 

n=l 

Air - ^ 


，亦即有 P{^ n i . o .} = 0. 

18. 证明，为了使得博雷尔-坎泰利引理中的断言 b ) 即第二引理中的断言成立,可以 

不必要求事件序列的独立性,而只需要求事件央，…两两独立(亦即 P^fl 
Aj )- P (木) P (牟）= 0, i ^ j ) 或两两负相关（亦即 P (^ n ^)~ p (4) p (為) < 
0, i ^ j ) 即可 • 

19. (关于博雷尔-坎泰利第二引理）证明博雷尔-坎泰利第二引理的如下 形式： 对于 

任何（不一定相互独立的）事件序列 戾， 4 2 , ... ，有 

( a ) 如果 


[i/ w ] 


E p ( 从 ) 


E p (^) 

n=l 


且 lim inf 




= 00 


2 


E p(4) 


■fc=i 


则 r { A n i . o .} = 1( 爱尔迪希 （ Erd 6 s )， 雷尼 （ R 6 nyi )). 

( b ) 如果 


E p ( 缺 ) 


E p (^) 


且 lim inf 


= 厶， 


oo 




2 


E p ( 糸 ) 


Jfc=l 


则 L ^ 1 , 并且 P { A n i.o.} = 1/L (科琴 (Kochen), 斯通 (Stone)[65]; 斯皮策 

(Spitzer) [113]). 

( c ) 如果 


E [P(^iA fc )-P(^)P(^)] 




E p (人) 


且 lim inf 


彡0, 


= 00 


2 


E p ( 戊 ) 


■fc=l 


则 V { A n i.o.} - 1( 奥尔特加 (Ortega), 弗舍波尔 (Wschebor) [86]). 
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⑹如果 E P ( A n ) = 00,并且 


E [P(A^4 fc ) - HV(Ai)r(A k )] 




an = lim inf 


2 


E p ( 戊 ) 


Jb=l 


其中丑 为任一常数,则都有 P { A n i . o .} > 

夫 ( Petrov ) [87]). 

，…为相互独立的随机事件序列，有 E P (^ n ) 

n=l 

E i ( A k ), 有如下的加强的博雷尔-坎泰利第二引理 成立: 


，其中 ， H + 2 a H ^ 1 (彼得罗 




H +2 帥 


证明，对& = 


20 


00- 




k=l 


S n 


1 ( P - a . s .). 


lim 


E 5 n 


21 •设 （ X n ) n ^ 与 ( F n )^ i 为两个随机变量序列，它们的所有有限维分布都对应相 

等 、Fx 

分布的随机变量 : K (即有 Law ( I ) =Law ( Y ) 或写为 X = Y , X l = Y ), 使得 

22 •设 ( x n ) n y 为独立随机变量序列，对于某个随机变量 X ,有 X n ^ X . 证明 ，X 

为退化随机变量. 

23. 证明，对于任何随机变量序列^ 2 ，...，都能找到常数序列 

0 ( P - a . s .). 

24. 设…为随机变量序列，而 &=& + •••+ 匕， 1. 证明，集合 （&—)( 由 

所有使得 I ： M 收敛的 ujen 构成的集合）可以表示为 


, n ^ 1). 假设三 X . 证明，存在某个与 x 同 


= 


x 




1 r 


•，使得 


a! ， a2，* 




fc^l 


(5 n = p | |J f ] I sup \ S t - S k \ < iV _1 V . 


相应的，由使得 E 不收敛的 uen 所构成的集合 （& ，）可以表示为 


fc>i 


(Sn = u n u sup \ S t - S k 


> N — 


l^k 


N^l m^l k^m 


25 •设 Q 为至多可数集.证明，此时若有&兰《，则有$ ( P - a . s .). 

26. 试举例说明，存在随机变量序列对其概率为1地有 lim sup ^ = oo , 

但是却存在随机变量％使得4 


lim inf = 


— 00 , 
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27. 证明 0-1 律的下述形式（试比较第四章第1节中的 0-1 律)： 如果也，4 2 ,…为 

两两独立的随机事件序列，则 


0，如果 ^ V ( A n )< 

1，如果 EP (^ n )- 

28•设义1，乂2,…为任一■随机事件序列，有 limP ( A n ) = 0和 5^ P ( v 4 n n ^4 n + i ) < 

证明，此时有 P{^n i . o .} - 0. 

29. 证明，如果 E p { ICn |> n }< 


00 


P { A n i , o .} = 


00 . 


00 , 


则 limsup (|^ n |/ n ) < 1 ( P - a . s .)• 


00 , 


证明 & s $ 亦即 


30. 设 Cn U ( P - a . s .), E | e „| < 

E | K | — o . 

31. 利用博雷尔-坎泰利第二引理，证明， P{^ n i . o .} = 1,当且仅当，对任何使得 

p ⑷ > 0的集合 A 都有 EP (^ n ^ n ) = 


彡 1 且 inf ECn > 


— 00 . 


oo , n 


oo . 


32. 设随机事件相互独立，且对一切 n > 1,都有 P ( A n ) < 1. 证明 

P {^4 n i . o .} — 1,当且仅当， P ( UA n ) — 1. 

33. 设 H " 为独立随机变量序列，有 P { X n =0} = l / n ， V { X n = 1} = 1-1/ n . 

令 K = {Xn = 0}. 试由性质 £ P ( E n ) 二 OO 与 g V ( E n ) = OO, 推出极限 

n=l n=l 

limX n ( P - a . s .) 不存在 • 

n 

34. 设^^,%，…为随机变量序列.证明 X n 4 o , 当且仅当，对某个 r > 0,有 


i^nl 


E 


0 . 


l + |^ n | 

特别地，如果 s n = x l + --^ x ni 则有 

S n — E*S^n 


2 


( S n - BS n ) 


P 


0 <=> E 


0, 


n 2 + ( S n - E 5 n ) 


2 


n 


再证明如下的蕴涵 关系: 


S n 


P 


P 


Xfc —> 0 


0 


max 

1 


n oo. 


n 


35 . 设 Xi , X 2 , - -- 为独立同分布随机变量序列，有 P{Xjt = ±1} — 1/2. 令 C/ n = 

f ： 争 ， n > 1. 证明， U n — U ( P - a . s .)， 其中随机变量 C / 服从区间[-1， +1] 上 

勾分布. 

36. (叶戈罗夫定理）设队多, 〆 ）为赋有有限测度 M 的可测空间，而 / i ，/2, …为定 

义在其上的斤几乎处处收敛于博雷尔函数/的博雷尔函数序列 （九 .叶 
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戈罗夫 （ Egorov ) 定理 断言：对任何给定的 £ > 0, 都存在 G 多， 有 < e , 

使得在其余集= ^ l \ A e 上面，成立一致收敛性 / n ( o ?) — f ( oj ), oj e A e . 试证 
明该断言. 

37. ( 鲁金定理）设 （ Q ， 多， P ) = ( K 6],^ 5 A ), 其中 A 是区间 [ M ] 上的勒贝格测度， 

多 为勒贝格集合类.设/ = /(4是勒贝格可测的有限函数.试证 明鲁金 定理 : 
对任何 e > 0,都能找到连续函数厶= / e ( x ), 使得 


X{x e [a, 6] : f(x) ^ f £ (x )} < 


e. 


38. 叶戈罗夫定理自然地导致如下概念的 引入： 

称函数序列 A , /2,…几乎一致地收敛到函数/，如果对任何 e > 0,都存在 
e 多， fi(A £ ) < e, 使得 U(uj)— f{uj) 对一切 u ； eA e 一 致成立（记为 / n 4 /), 

证明，几乎一致收敛 / n =4 /蕴涵依测度收敛 （/„ A /) 和几乎必然收敛 


A 


(fn ^ /)• 


39 .设 Xi,X 2 , ■•- 为随机变量序列，而 {X n 户}为当 

不收敛的 ojen 所构成的集合.证明 


时,那些使得 X n { u ) 


n — 00 


{x n 7 ^} = [J {liminf X n ^ p 


< q ( lim sup X n } 


p<q 


其中的求并运算系对一切满足 p<q 的有理数 p 和 g 所构成的数对 (p,q) 求并. 

40. 设随机变量序列，…定义在完备的概率空间之上，并且概率为 1 地收敛 

到随机变量 X . 证明，分别由随机元 p ^， X 2 ,...) 与 ( X u X 2r ^ , X ) 所生成的 
代数（参阅第 5 节） a ( X x , x 2 ，…）与 a ( Xr ，知 …， X) 相互重合， 

41 •设 X l5 X 2 , 为独立同分布随机变量序列，它们的共同分布 F 二 F ( x ) 满足条 




件 


2 


[1 — F(x)] = 0. 


lim 

X—^OO 


X 


证明 


p 


—j= max X{ —^ 0. 

y 71 


n oo* 


42 .设 ^2； • *' 为独立同分布随机变量序列，有 E^i = = 

P{fi = 0} = 0, 证明， 


2 


和 


< 00 


E 6 






Jb=l 


n —> oo* 


/ X 2 + fl 2 5 


E 4 2 


1 


43 . 假设 Cn i C ， 


P 


并且有 P{Cn < Vn} = 1, Tl ^ 1. 证明， P {《 彡? 7 } = 1. 


Vn 


V 
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P 


44. 设 K2, … 为非负随机变量序列，多 i ， 為， … 为 a- 代数序列，有 E ( 匕 | 多 „) 

0. 证明 ， Cn ^ 0. 

假设 ^ J f 且 C^ n 么表示依分布收敛 ) ，其中€为非退化随机变量 
>0, 证明 


45 




Cn 


46 .设 Xi ， X 2 , …为任一随机变量序列.证明 

=1，则 lim 

>0, BX n ^0, 0< EXl < 00 ,则 




= 0 ( Pn )( 试比较第 2 0题中的断言). 


(a) 若 lim 


x 


EX ? 


EX 


(EX ) 

EX? 


(b) 若 lim 


X n 


X n 


^ 1 ^ lim 


P lim 


> 0 . 


EX n 


EX n 


47 . 设 a ,6, •■-为独立同分布随机变量序列，有 E | Ci | < 00 .设 a 为某个正的常数， 

令乂 n = {| Cn | > ⑽}， n > 1. 证明， P ( limA n ) = 0. 

48. 证明，在连续函数空间 C 中不存在这样的距离使得收敛性 p ( f n , /) — 0 等 

价于 / n 逐点收敛到 /( 试比较第12题). 

49. 试举例说明，对任何 

Cn (^) — ^ C (^), 并且 Ef „ = — c，n ^ 1,但是却有 Ef = 

试（在第一章第4节第23题中的三种定义中的每一种意义之下）求出随机变量 

的中位数二 MfeO , 其中 r ? 是标准高斯随机变量. 

51. 设随机变量 Un ^ l ) 的中位数 / x n = 〆 &)唯一确定（参阅第一章第4节第 2 3 

题)，^几乎必然收敛到随机变量试举例说明，一般来说，极限 lim / x n 未必存 


0,都存在随机变量序列使得逐点地有 


c > 


C. 


50. 


在, 


52. 设 a ,6,-* 为独立同分布的非负随机变量序列，有 E 6 = 1. 令 r n = n 心, 

时，有 — 0 ( P - a . s .). 

53. 设&，&，■■•为独立同分布随机变量序列.令& =心+…+匕， n ^ l . 证明 

( b ) E | Ci | < 00 , ECi 一 0 

( cm ? < 

54 . 设 a , a ■•- 为随机变量序列，而 e 为某个随机变量.证明，对一切1，都有 

如下两个条件相互等价： 

亦即 E | Cn - e | P ^0). 

b ) Cn ^ 并且随机变量族 {\ U P . n ^ l } 一致可积. 

55•设 n … 为独立同分布随机变量序列，有 p{a > x } 


k=l 


n ^ l . 证明，当 


n — ^ oo 




+00 (P 孤 ) • 

(ICll ， … ， l 《 n|) 


E^r < 00 




00 






max 


0 (P-a,s,)* 




l ^ n | 


max ㈣，… ， |Cn|) 


0 (P-a-s,). 


00 


y/n 


X^O (即服从 




= e 
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标准指数分布 )• 证明 


1，如果 a < 1， 
0，如果 a > 1. 


P{^n > otlnn i.o，} = 


上述断言还可加强为 


1，如果 Q ； $ 1, 
0，如果 a > 1. 


P{Cn > Inn + a In Inn i.o-}= 


并且，一般地，对任何 A : 彡1，都有 


1，如果 a 彡1， 
0，如果 o ； > 1. 


P{Cn > In 71 + In In n + * •- + Ixx * ^hxn + +q； 】r • 二 • Inn i.o.} 

(fc+i) 重 

56. 为推广定理 3 (关于由几乎必然收敛推出在 l 1 中的收敛性)，试证明如下结果(谢 

费引理)：设$为随机变量，而 ( Cn ) n>l 为随机变量序列，有 E | C | < 00, Ei^nl < 

和 Cn — * C ( P - a . S .)， 则 E | Cti — Cl — 0，当且仅当， E |^ n | — * E |^|, Tl > oo . (试比较 
第6节第19题中的结论 .） 

57. 设&，&，• ■•为独立同分布随机变量序列，具有密度函数/ = f ( x ). 现知 




fc 重 


00 


lim f(x) = A > 0. 


x |0 


证明 


p 


n min(^i ，•- ,Cn) 




其中 7? 是以 A 为参数的指数分布随机变量. 

58. 证明，只要第6节第33题中的条件⑴， （ ii ), ( iii ) 之一成立，就有 

B \ X\ P 对一切 0< p < r . 


P 


BX n 




59.设(^)^!为相互独立的正态随机变量，有 Cn 〜 AT ( Mti ， g ). 证明， E 技在 L 1 

中收敛，当且仅当 




n 彡1 


^(Mn + a n) 


< 00 * 


n 彡1 


再证明，当该条件成立时,对一切 p > 1,级数 E 6都在 p 中收敛. 

n^l 

提示： 为证第二个结论，最好是对任何 P > 1，验证 




< 00 * 


n^l 


P 
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60.设 Xi ， X 2 ，…为独立随机变量 f 列，均服从区间[0，1]上的均匀分布.令 K = 

X n ，n > 1，我们来考察 f ： z n Y n . 证明该级数的收敛半径丑= R(co ) 概率 




■ • 


n=l 


为1地等于 

提示： 利用 


e. 


61•设 ( Q ， 多， P ) = ([0, 1)， ^([0,1)), A ), 其中 A 为勒贝格测度,设实数 w e [0,1)，而 

( a l 5 a 2 ,.-.) 是它的连分数分解（知= a n ( u ) 为整数）[ 3 ].证明，当 


n — > oo 


U ) = 


时，有 


~ 1 +1 A ' 

_1 + i/(fc + 1). 

注•.在“概率的数学理论形成的简史”（《概率》第二卷 p 313) 和 V . I . 阿诺 
尔德的专著 [4] 的 plOl 中可以找到关于该问题的提出和解决过程的介绍. 

62•设 U 2 ，… 为独立同分布随机变量序列，有 P{Xx =0} = P{Xx - 2} = 1/2. 


A {cj : a n (a?) = k } 


In 


— > 


In 2 


证明 


( a ) 级数 E 佘几乎必然收敛（到某个随机变量叉). 

( b ) x 的分布函数是康托尔函数（参阅第3节). 


§ ii . 具有有限二阶矩的随机变量的希尔伯特空间 

1. 证明，如果卜 l.i.m. 匕，则 .1 卜 IICII. 

2. 证明，如果4 = l.i.m. ^且 r? = l.i.m. ?7n， 则 （Cm ??n) — (€， W). 

3. 证明，范数 HI 满足“平行四边形” 性质： 

把 + 训 2 + |1 《 - 训 2 = 2(|_ 2 + || 训 2 ). 

4 . 设{《1,…， U 为正交随机变量族.证明，对其成立“毕达哥拉斯定理”: 


IM 2 =d_ 2 . 


i=l 


5. 设 a ，6, …为正交随机变量序列，令& = 6+.. .+& 证明，如果 g Eg < 
则存在随机变量&有 ES 2 < oo , 使得 l . i . m . S n = 5,亦即||& - f || 2 = E ||5 n 


00 , 




2 




o 


n — > oo- 


n+/c 


提示: 根据第 4 题，利用关系式 || 5 n+fc - S n 
6. 证明，拉德马赫 （ Rademacher ) 函数瓜可按如下方式 定义: 


2 _ 


E Hull 2 . 




Rn(x) = sign(sm2 n 7rx), 0 < x ^ 1, n = 1 ， 2, • • • • 
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7. 证明，对于 e e L 2 ( Q , P ) 和任何子 a - 代数汐 g 多，都有 


I 旧>|_观 

并且等号成立，当且仅当，《= ERI 穿） （ P -8 LS .). 

8. 证明，如果 X y Y e L 2 ( n , P ), E(X \Y) = Y 3 E{Y \X) = X, 则有 X 

( P - a . s .), (试比较第 7 节第 24 题中关于 X , F e L 1 (1}，多， P ) 时的断言，那里的 
证明要比 X , YeL 2 P ) 场合下的证明复杂得多 .） 

给定多的三个子 (7- 代数(劣1 2) )和 （劣 1 3) ) •设之 为有界随机变量.假设 
对每个 n ， 都有 


Y 




9. 


^ c ^ c ^ 3 ), E (㈣ 3 )) 


P 




P 


证明， E ⑷劣 2) ) 

10. 设 f 二 f ( x ) 为定义在 [0, oo ) 上的博雷尔函数,对任何 A > 0,都有 




—入 J ： 


f ( x)dx = 0. 


e 


o 


证明（关于勒贝格测度几乎必然）/ = 0. 

11. 设随机变量??服从区间[-1， 1] 上的均匀分布，而 （ =铲.证明， 

⑷根据7?估计$和根据$估计7?(在均方差意义下）的最优估计分别由下 
面的关系式给出： 




m\v) = v 2 , m io = o. 


( b ) 相应的最优线性估计则分 别为： 

m I V ) = 1/3, E ( r ? I 


0. 




§12. 特征函数 


1. 设 （与 n 为相互独立的随机变量， /(啲= h { x ) + t / 2 ( x ), g ( x )= 仍 ( X ) + ig 2 ( x ) 

其中 / fc ( x ), p fc ( x ) 为博雷尔函数 ， k = 1,2, 证明,如果 E|/ ⑹I 


^\9(0\ < 


<00 


oo, 


则有 


mm ) g ( v )\ < 


和 


m 09( v ) -聊- Eg ( v ). 

(请记住，我们有： Ef (0 = Eh (0 + iEf 2 (0, E |/(0 l = E 咖 + /|(0) 1/2 .) 
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2. 设€ = (& ， ■■■ ， Cn )， 有 E | K 『< oo , 其中 _ 二 ■证明 

E (^ o k + 〜⑷ pii' 


fc =0 


其中 t = ( ti ,' ' ■ , t n ), ( t , = ti^i + ... + t n ^ ny 而当 p || —> 0 B 寸，有 £ n { t ) 

提示： 与一维场合下的证明相类似，只是需将吒换为化幻. 

3. 试对 n 元分布函数 F = F { x u …，： c n ) 与 G = G { x u …， x n ) 证明定理 2. 

4. SF = F ( xi , ••- , x n ) 为 n 元分布函数 ， (p = ( p { t u ... , t n ) 是它所对应的特征函 
数.试运用第3节 （12) 式中的记号 5 证明多元逆转公式（反演公式）的正 确性: 


0 . 


— > 


n 


g — g — itfcbfc 


c 


c 


P ( a ? 6]= lim 


#( 亡 1 ，…， （ n ) 出 1 … dt n - 


(2丌) 


itk 


C 


fc=l 


(在上述公式中，假定区间 （ a ， fe ] 是函数 P ( a , b ] 的连续区间，其中 a = ( ai ，…， 

点 Ctfc ， fcfc 都是边缘分布函数 

F k ( x k ) 的连续点，其中， F k ( x k ) 是通过在 F ( x u ^- , x n ) 中令除了以以外的所 
有其他变元趋于无穷时的极限 .） 

5. 设仰⑷，都是特征函数， Afc ， > 1，均为非负实数，有= 1. 证明， 
Yl ^ k ^ Pk ( t ) 是特征函数. 

6. 如果⑷是特征函数，那么 Rey ?(() 与 Im ^( i ) 是否也是特征函数？ 

提示： 设# =沖）是分布 P 的特征函数.为了回答第一个（关于 Re ^( i ) 
的）问题，可以考察分布 Q ， 其定义为 Q ( A ) - ^[ P ( A ) + P (~ A )], 其中 — 义= 
{-X : x G A }. 而为了回答第二个问题，可考察函数 p ⑷三 1. 

7•设 ( fl ,( p 2,< P 3 都是特征函数，现知 <Pl<P2 — 

8. 试证明表4与表5中所引人的关于特征函数的公式的正确性， 

提示: 对于前5个离散分布,它们的特征函数可以通过初等计算得到. 

对于负二项分布 {C T k z\p r q k ~ T , fe = r , r + 1, ■ ■ 

事实是有 益的： 对于 |zj < 1，有 

OC 

E^ r 


)，6 = ( 61 ， … ， 6 n )， 意即对所有 fc = 1， 


a 


， n ， 


• « 4 


n 


试问，是否必有 


7 




< P 2 = ^3 【 


1，2,…），注意到下列 


■ ; r 




— 1 一 fc_r 


(1 —z) 一 r . 


z 


-1 


在求正态分布 AA ( m , a 2 ) 的特征函数 w ⑷时，需要指出 •_ 根据复变函数理 
论(在 m = 0, o * 2 = 1的场合下)，有 


2 


IU 2 


(x—itf/2d x 


2 


e itx e 


r/2 


_) = 


— X 


f [ z ) dz , 


e 


e 


v27T Ju 


V2 


7T 


E 


L 


— (z—it) 2 /2 


其中 f ( z )= 


0 }， 而 


L = {z 


: Imz 


e 


y /2 


7T 


y2 ^ 2 dy = 1, 


f ( z)dz = I f ( z)dz = 


e 


\/27 T 


L 


L ( 


E 
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其中 L f = {z : lmz = i }. 

类似的处理办法也可用于伽玛分布. 

对于计算柯西分布的特征函数运用残数理论是最方 便的： 如果6 > 0, 


则 


e itx e 


根据关于残数的柯西定理和若尔 


dx = 


tt ( x 2 + 9 2 ) 


R 


itz 


其中 L = {z : Imz = 0}，而 f ( z ) = 
当引理(参阅 [79] 第一卷)，知 


6 


( z 2 +0 2 ) • 


7T 


~te 


f ( z)dz = 2 m res / = 


e 


i0 


L 


同理，对* < o , 有冰) 二总之，我们有#⑷= 
9.设$为整值随机变量， n ( t ) 是其特征函数.证明, 

P {《 = k }— 


一刚 


e 


7T 


—— ikt 


(p^(t)dt, fc = 0, 士 1 ，士 2, • • •. 


e 


2 n 


一 7T 


10. 证明，在赋有勒贝格测度的空间 L 2 = L 2 ([-7 T , 7 T ], 潔[- TT , 7 T ]) 中，函数族 


} 


i 入 n 


?1 = 0,士1,士2，一 


e 


v 2 ?r 


形成一组正交基. 

提示： 可按照如下思路证 明之： 
( a ) 根据 e > 0,找到 c > 0,使得 




£ 


其中 fi x ) = < p ( ar )/(|^( x )| ^ c ). 

( b ) 根据鲁金定理（参阅第10节第 37 题)，找到连续函数 / e ( x ), 有 |/ e ( x )| 彡 


使得 




[-7 T , 7 T ] : f e ( x ) ^ f ( x )} < €, 


此时有11/-/1彡^^_ ^ 

( C ) 找连续函数 fe ( X ),使得 / e (-7 T ) = / e ㈨ 和 j|/ e - / e || L 2 ^ 

( d ) 根据魏尔斯特拉斯定理，找函数 7 e ( x )= £ 办 e ifc '使得 


e. 


fc=_u 


l/e ㈤ 一 /e ⑻ I < 


sup 

£ [ 一 7 T t 7 r ] 


£ 


x 


这也就意味着 ii / e -/ e || L2 ^ 

由⑷〜 （ d ) 推知，形如 E a k e 如 的有限和在 L 2 中稠密，亦即函数族 


£. 


n 


fc—- TV 


} 


1 ^iXn 


= 0, ±1，士2, •. 4 形成一组正交基. 


， n 
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H . 在博赫纳-辛钦定理中假定所考察的函数是连续的.试证明如下的（里斯 

的）结果,它展示了可以在多大的程度上拒绝关于连续函数的假设. 

设 P W ⑷是勒贝格可测的复值函数，有 W 0) = 1. 那么 p 是正定 
的，当且仅当，它（关于数轴上的勒贝格测度几乎处处）重合于一个特征函数. 

12 . 如下函数中，哪些是特征函数？ 


-1*1 


a 


< p { t ) = e ’' 
< p ( t ) = (1 + i 4 ) -1 


P ( t )= 


， 0 $ a ^ 2 ? 


a ： > 2, 


e 


(pit) = (1 + |t|) 一 


t ^1 


1 _ Kl ， 


t ( 1/2, 


p ( t )= 


( fit )= 


l /(4| i |) 5 \ t \ > 1/2. 

提示： 为验证其中的一些函数不是特征函数，最好是回到定理1，或者利用 
下面的第21题所介绍的不等式. 

13. 证明如下的函数不是特征 函数： 


0, 


t > 1, 


v 1 — ⑷彡 1， 

i^i > i - 


ip{t) — 


0, 


试问，函数一⑷=甲是否为特征函数？ 

14. 证明，如果函数是特征函数，则函数 \^( t )\ 2 也是特征函数. 

15. 证明，如果函数 p p ⑷是特征函数,则对任何 A ^ 0,函数 eMvKd 都是特 

征函数.试问，函数 

16. 设函数一⑷是特征函数.证明，如下的函数都是特征 函数： 


-i*i_ 


A(e 


是否为特征函数? 




ip(ut 、 du. 


U ( p ( ut ) du . 


e 


o 


o 


17. 证明，对任何 n ^ l , 如下的函数都是特征函数: 




fc =0 


<fn{t) = 


( it ) n / n \ 


18. 设随机变量服从区间 （ -n ， n) 上的均匀分布，将其特征函数记为 ip Xn ( ty 证 


明， 


Jim ( t ) 




0， t ^ 0. 


19 •设 X 为随机变量 ， F F ⑻是其分布函数，而 （ m ㈨ ) n>1 是其矩序列 
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⑻— 


x n dF ( x ) I . 


m 


(n) 


证明，如果对某个 s > 0,有级数 I ： 

矩序列 （ m ⑷)唯一决定. 

20.设冰 ）=Ho e itx dF { x ) 是分布 F = F { x ) 的特征函数.证明， 


收敛，则分布函数 F = F { x ) 由 


m 


n! 


n=l 


c 


—itx 


( p ( t)dt = F ( x ) — F ( x —)^ 


lim 


e 


2 c 


—C 


C 


= Y ^ i F ( x ) - F (t -)] 2 . 


lim 


2 c 


—c 




特别地，分布函数 F = F ( x ) 连续，当且仅当，其特征函数满足条件 


C 


\( p ( t)\ 2 dt = 0. 


lim — 


C—KX) C 


—C 


21. 证明，任何特征函数^ ^⑷都必然满足下列各不 等式: 


1 — Re <^( nt ) ^ n[l — ( Re < p ( t )) n ] ^ n 2 [l — Re <^( t )], 

|Imp ⑴| 2 < ^[1 - Re<^(2i )]； 

1^(0 _ ^( s )| 2 ^ 4(/?(0)[1 - (p(t - ^)]; 

1 冲)-咖)| 2 < 2[1 -Re 冲- s )]; 

(p(u)du < (1 + Re</?(/i)) 1 / 2 J t > 0. 


0 ， 1 ， 2，...；㈠ 


n = 


2 . 


1 — Re ( p (2 t ) ^ 2( Re ( p ( t )) 

1 - \( p (2 t )\ 2 ^ 4[1 - I 屮⑷ | 2 ]; 




2 h 


t — h 


(最后两个不等式称为拉 伊科夫 ( PamcoB ) 不等式 .） 

提示： 上述各不等式的证明全都离不开对公式⑷⑷= JZ , e itx dF { x ) (以及 
关于 R 叫⑷和 Im ip ( t ) 的相应公式）的分析.例如，为了证明不等式 


1 — Ke ( p (2 t ) ^ 4[1 — Re ( p ( t )] 


(**) 


(不等式的 


2时的特殊情形)，需要用到如下的关 系式: 


n 




2亡 x ) dF ( x ) 和 1 — cos 2 tx < 4(1 — cos tx ). 


1 — Re ( p (2 t ) — 


(1 


— cos 


22 •设冰)为特征函数，有捧 ）=1 + / ⑷ + o { t 2 ), t — 0,其中 /(*) ：- 证 

明 W ⑷三 1. 

提示： 运用上题中的不等式 (**). 
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23.设 X 为随机变量，其特征函数与分布函数分别为# = #⑷和 F = F ( x ). 

( a ) 证明，⑻ < oo , 当且仅当， J : < oo . 并且在该条 


件下，有 


1 — Re ( p ( t ) 


1 — Ke ( p ( t ) 


2 


|x|dF(x) 


dt 


dt . 






t 2 


t 2 


7T 


7 T 


0 


( b ) 证明，如果 \ x \ dF ( x ) < oo , 则 


Re ( p f ( t ) 


\ x \ dF ( x ) 


E | X | 


dL 


三 






7T 


(亦可参阅第 37 题 

提示： 为证⑷，只需利用 


OO 


1 — cos xt 


1 


dt . 


x 


t 2 


7 T 


signx ， 其中 


为证 （ b )， 需要利用 I 


X = X 


1, x > 0, 


0, 


0, 


sign a := 


x 


-1， x < 0 


和 


sin xt 


dx . 


sign a : 


7T 


24 •设 p ⑷为特征函数，有吨 ）=1 + 0(|^) } f — 0,其中 a G (0,2]. 证明，对于以 

< p ( t ) 作为自己的特征函数的随机变量 C ， 有 


P {|^| > x } = 0( x ~ a ), x 0. 

25. 设随机变量 X 与 y 独立同分布，均值为0,方差为 1. 试通过考察特征函数，证 

明，如果 （X + Y )/ V 2 的分布与 X 和 F 的分布 F 相同，则 F 是正态分布. 

以 F = F { x ) 为分布函数的非负随机变量的叉的拉普拉 斯变换 F = F ( A ) 的定 
义是： 对 A > 0,有 


26. 


-XX 


—Xx 


dF { x ). 


F ( X ) = Ee 


e 


[0, oo ) 


证明如下的（伯恩斯坦） 准则： (0, oo ) 上的函 数 F = P ( A ) 是 [0, oc ) 上的某个分 
布函数 F = F ( x ) 的拉普拉斯变换，当且仅当，该函数 是完全单调的 (意即对一 
切 n 彡0,都存在导数 F ⑻ ( A ), 并且（一 l ) n F ⑻ ( A ) 彡 0). 
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27. 设分布函数 F = F ( x ) 具有密度函数/ = f ( x ) 和特征函数 p = ^( t ). 假设有如 

下二条件之一 成立： 


或 （ b ) 


f 2 ( x)dx < 


(a) 


\( p ( t)\dt < 


oo 


OCX 


证明，此时成立如下的帕 塞瓦尔 公式: 

f 2 [ x)dx — 


\( p ( t)\ 2 dt (< oo ). 


2 tt 


OO 


(试比较第 11 节的帕塞瓦尔等式 (14).) 

28. 设 p = Wt ) 是分布函数 F = F ( x ) 的特征函数.证明，如果分布函数 F = F ( x ) 

具有密度函数/ =/⑷，则当 i 

29. 设 F = F ( x ) 与 F =戶⑷是 （ IR , 涿 ㈤ ）上的两个分布函数，它们的特征函数分 

别为 p 和 f = ( p ( t ). 证明如下的帕 塞瓦尔等式： 对 （e IR ， 有 


时，有 ( p ( t ) —> 0. 


—>■ oo 


—ity 


甲 [X- t ) dF { x ) 


< p ( y ) dF( y y 


(*) 


e 


如果歹是正态 AT (0, a 2 ) 的分布函数，贝 【J 






一 ity 


dF { x ) 


<P[y)dy • 


e 


e 


e 




V 27TCT 2 


(试比较第 40 题 ,） 

30. 试由上题中的 （**) 式推出如下 结果： 如果分布函数巧与 F 2 的特征函数相同, 

则有朽= F 2 . (试比较第41题 .） 

31. 试由第29题中的 （*) 式推出如下 结果： 如果 < p ^( t ) 是随机变量 （ 的特征函数, 

则随机变量|$|的拉普拉斯变换是 


A 


Ee 一糊= 


( p ^( t)dtj A > 0. 


丌 (A 2 +t 2 ) 


— OO 


(参阅第 23 题中的断言 .） 

32. 设 F = F ( x ) 为分布函数，而= IZo e itx dF ( x ) 是它的特征函数.试根据定 

理3中的断言 b )， 证明，性质 & ⑷㈣ < oo 可以保证该分布具有连续的密 
度函数 f ( x ), 

试举例说明，存在分布函数 F = Fix ), 它具有连续的密度函数，但却有 

抓设吨 ） ：= J R e itx dF { x ) 是分布函数 F { x ) 的特征函数.如所周知（定理1)，如果 

/ R | x | dF ⑻ < oo , 则冰）可微,试举例说明，一般来说,其逆不真.甚至存在这 
样的特征函数 ip ( t \ 它无限次可微，但是却有 f R \ x \ dF ( x ) 

样的特征函数的例子. 


OO- 


. 试给出一个这 
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34. (关于逆转公式）仿照定理3的证明,证明,对于任何分布函数 F = F ( x ) 与任何 

< b ， 都有如下的（广义）“逆转公式” 成立： 


a 


—itb 


—ita 


1 


e 


— e 


- ~[ F ( b ) + F { b -)} - -[ F ( a ) + F ( a -)]. 


lim 


2 tt 


2 


it 


2 


— C 


35. ( a ) 具有密度函数 


1 — COS X 


m = 


a ? € M 


2 


7TX 


的概率分布的特征函数是: 


1 - |亡|, \ t \ ^ 1, 

\ t \ > i - 


= 


0, 


( b ) 试问，具有如下的密度函数的概率分布的特征函数是怎样的? 


1 - 


COS 7TX 


/( 工) 


， x 6 M . 




7 T 2 X 2 


( c ) 证明，分别具有下列密度函数 


/ l ⑷ 


/2⑻ = 


， x € M 




2 


7TChx J 


2 ch 


x 


的概率分布的特征函数分别为: 


wt 


屮2 (亡）= 




2 sh 


2 


2 


( d ) 试求与下列各个特征函数相对应的概率分布： 

\ it 1 — it 

1+72 5 1 + t 2 

36•设 m ( fc ) = J R x k dF ( x ) (k ^ 1) 是分布 F == F ( x ) 的实质有限矩.证明 


2 


2 ， 3#-1’ 2 e " it+ i + i e2it * 


cos ~ 


2fc 


a 


ch ( ax ) dF ( x ) = 


(2fc) 


m 


(2 k )\ 


R 


k 


其中 chy = ( e~ y + g v )/2. 

3 T . 如同第 23 题，设以 F = F { x ) 为分布函数的随机变量 X 的特征函数是# = 

证明，无！/?€(0,2)，有 


\ x \^ dF ( x ) < 


当且仅当 


^dt < 00 ; 


1 — Ra 


1㈣ 
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并且此时有 


oo 


1 — Ke ( p ( t ) 


r \xfdF(x ) 二 ％ [ 

J 一 00 J — oo 


/3 


dt . 


EX 


\ t \^ 


其中 


-1 


r(i + U 7 r 


OO 


1 — cos t 


dt 


C /3 ~ 

提示：利用关系式 


sm 


\ t \^ 


2 


7T 


00 


00 


1 — COS ㈣ 


/3 


dt . 


x 


\ t \^ 


— OO 


在第 8 节第 27 题中，通过直接计算随机变量 C / r /, e /| r /|, |《|/|4以及服从以 

( xgIR ) 为密度函数的柯西分布的随机变量 C 的特征函数来证明该题中 


38. 


7r(l+X 2 ) 


的断言. 


39.设心，^…为独立同分布的标准正态嵐(0, 1) 随机 变量， 对 n > 1，令 


In = Cl + …+ Cn 


和 


S n = Xi + * * * + X n . 


试运用特征函数方法,证明 


S n 


law 


Af (0, a 2 ) 


n 3 /2 


其中 M (0, a 2 ) 为正态分布， a 2 二 1/3. 

40.设$与 Ty 为相互独立的随机变量，其中 r ? fl 艮从标准正态分布 （ r ? ， 

设/ = /(4为具有紧支撑的有界博雷尔函数.证明，对 a > 0,有 


AT (0,1)). 又 


W 


E / C + 


e 


27T 


a 


其中， ( p ^( t ) = Ee 〖 '而/⑷ = e lt ^ f ( x)dx (试比较第 29 题) ■ 

试对随机向量 $与 V 陈述相应的结论. 

41. 试利用上题中的 （*) 式，证明，随机变量€的特征函数 讀 )可以唯一确定其分 

布.（试比较定理 2 .) 

提示: 试证明，在上题中的条件下，可以由 （*) 式推出 


2 


抑⑷ /( 一亡) 出 


E/(C) = lim 


J 




e 


2<r 


2 tt 


(利用具有紧支撑的有界博雷尔函数 / = /(X) 的任意性)，即可由此 断言： 特征 
函数 抑 ( t ) 完全可以确定随机变量€的分布. （(**) 式对于多元随机向量也成立. 
试由多元场合下的式推出相 应的卜 *) 式 .） 




§12. 特征函数 


• 141 . 


42* 设# = #⑷为特征函数， X 才某6 > 0,有 


对于 | i | > b , 

其中0 < a < 1. 证明，在 W 6时，有如下的克拉默不等式 成立: 




a 


t 2 


沪⑷ < 1 _ (1 _ 。 2 ) 


Sb 2 ' 


提示： 利用第21题中的不 等式: 


1 - \( p (2 t )\ 2 ^ 4[1 - | 沪⑷| 2 ]- 

43. (补充第21题中的不等式） 设 (p = ( p ( t ) 是分布 F = F ( jr ) 的特征函数.证明如 

下的贝里-埃森不 等式： 对1彡 r <2, 有 


1 一 #⑷ | 彡 C r p r \t\ r , 


其中氏=/二1才研 ㈤ ，而 C r 为常数. 

44. 对于整数 n 彡1，随机变量 X 的 n 阶矩 m (n) = 和 n 阶绝对矩 /3 n = E \ X \ 

都可以有直接的表达式，其中出现有 X 的特征函数= Ee itx G M ) 的 
阶导数（参阅，例如 ， （13) 式或第烈题) • 对于非整数的 
㈣ = EX a 和屯二 E \ X \ a 的相应结果，需要用到按照如下方式引入的分数阶 


n 


n 


0 ,为了得到关于 


a > 


m 


导数 ■ 


写 a = n + %其中 n 为非负整数，而0 < a < 1. 我们将如下的函数称为函 
数/ = /⑷ M ) 的 a 阶分数阶导数（假定相应的积分存 在)： 


/⑹⑷_/ ㈨ ⑷ 


a 


ds , 


(t — s) 1+a 


r(l - a) 

并记为 D^m (= 暴 m ). 特别地，如果 / ⑷二 *)(= /二户狀 ㈤ ） 是特 
征函数，则 


/㈨ (0)-/ ㈨ (一 


JD( n+a V ⑷ 


du 


r (- a ) Jo 


1 


t =0 


u 


n+1 


(- 1 ) 


du 


(1 — cos ux ) dF ( x ) + i 


x n sin uxdF ( x ) 


n 


X 


r(—a) 


1 +a 


U 


(*) 


证明，对于偶数 n ， 绝对矩 /3 n+a < 00 , 当且仅当 

(i) 0 n < OO, 

_ ■ 

(ii) Re L >( n + a V ⑷ 存在. 

L t=0. 

并且在此种情况下，有 


Re {- l ) n ^ D ^ a ) ( p ( t ) 




a 


OTT 


COS 


t=0. 
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提示： 为了证明结论，需要利用 （*) 式，以及对于所有0 < b < 2都成立的 

如下 公式： 


1- 


nb 


cosu 


du — ~ T (— b ) cos —. 

注：对于任何 n 彡0和 0< a < l ， 关于 E \ X \ n ^ a 的更加详细的讨论见专著 


l+b 


U 


0 


771 


45. 设 tp =禅) 为特征函数.证明，对任何 w 与 s ， 都有 

| 咖 + s )| > 咖)卜 \( f ( s )\ - [1 - \ if { u )\ 2 ] 1/2 [\ - \^( s )\ 2 ] 1/2 . 

提示： 利用博纳赫-辛钦定理（第6小节). 

46. 设随机变量对⑷幻具有密度函数 


f (^ y ) = t {1 + xy ( x 2 - y 2 )} I (\ x \ < 1, \ y \ < 1). 


4 


证明，随机变量 $ 与 r ? 相互独立，并且分别具有密度 函数: 


h( x ) = f(W < 丄 ) ， fv(y) = 2 J ^I < 

而且《 + /?的特征函数 ^ + v ( t ) 等于特征函数穴⑷与化⑷的乘积，亦即 

作十”⑷= we ⑷， 化 C0. 

47•设…为独立同分布的随机变量序列,分别以1/10的概率取值0,1，… 


9. 


令 


6 




10 fc * 


fc=l 


证明， ( X n ) n >1 不仅依分布，而且几乎必然地收敛到一个服从区间[0，1]上的均 

匀分布的随机变量. 

提示： 利用特征函数方法. 




§13. 高斯系 

1 . 证明，在高斯系 R ， 17l ， … ，?? n ) 场合下，条件数学期望 • - , T ] n ) 等于广义 
数学期望 E (^| l 7 l , • * * , Tjn ). 

设 ( e ， m ， …， rjk ) 为高斯系.试说明条件数学期望 E ( C \ f ] u …，取）的结构 ， n > 1 
(作为的函数). 

3. 设义=(為) wwn 与 y = 

DYJk ， 1 ^ k ^ n R 


2 


是两个高斯序列，有 EX fe - EY k , UX k = 




( X kj X t ) ^ cov { Y k , Yi ), 


cov 


n . 
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证明如下的斯莱皮恩 ( Slepian ) 不等式：对 a : e R ， 有 


P i sup Xk < x > ^ P < sup Yk < x > . 






4 •设 6,6,6 为相互独立的高斯随机变量，有 Ci - Wl ), i = 1,2,3. 证明， 


Cl + ^2^3 


難 1). 


\/1 + ^3 


(由此产生出一个有趣的 问题： 即对 n ^2, 考察71个相互独立的高斯随机变量 
6,…， Cn . 在关于它们的怎样的非线性变换之下，所得的随机变量仍然服从高 
斯分布?） ' 

5•设 r ( M ) 是（25)，(29)和 （30) 式所定义的函数.证明，矩阵 R = ( r ( s , t ) s ^) 是 

非负定的. 

6.设 A 是某个 
?7与 R 使得 


矩阵. 称 


矩阵是 A 的伪逆矩阵，如果存在矩阵 


m x n 


n x m 


AA 0 A 二 A ， A 0 = UA * ^ A * V . 


证明，如此定义的矩阵 A ® 存在且唯一. 


7. 证明，如果在关于正常相关的定理中的公式 （19) 和 （20) 中，将 Dg 1 换成如上 
所述的广义逆 D |， 则这两个公式对于退化的矩阵 Da 也成立. 

8. 设（0，（）= (〜，‘■ …，⑺是具有非退化阵 △ 三 D 卵 — 的高斯向 

、❹ ajtie ) 具有由下式所定义 




量. 证明，分布函数 P ( i 9< = P (<9 i ^ 

的 ( P - a . s .) 密度函数 pj / h ，… ， afc | C ): 


辽1， • • 




- £(■)*△] ( a - E (嶋）卜， 


p(ai ， … ， afc|f)= 


exp 


(2丌产/ 


2 


9 .设 C 与 7/ 为相互独立的标准高斯随机变量（均值为0,方差为 1). 

( a ) 证明，随机变量$ + q 与< - q 为相互独立的高斯随机变量. 

( b ) 试利用 （ a ) 和第8节第27题中的结论，证明， 

^ law 1 7 ]/^ law 1 + C 

C~ri ll/C 1-C 


C law 
= 


law 


c， 


其中随机变量 c 服从以为密度的柯西分布（如同往常，“埜，，表示同 




分布). 


10 . (伯恩斯坦）设 （ 与7?为具有有限方差的独立同分布的随机变量.证明，如果随 

机变量€ + ^与 e _ 7?相互独立，则 e 与 r ? 是高斯随机变量.（关于该命题的推 
广，即“达尔穆亚#基托维奇定理”，见第44题 .） 









































































































第二章概率论的数学基础 


- 144， 


提示： 可以按照如下步骤证明该命题（以作⑻表示随机变量 C 的特征函 




数): 


⑷由抑⑷= < pi ^{ t ) = ^+ n ( V 2 )^- n ( V 2 ) 可以推知 


2 


2 


W 0 )I 4 )I ， 

wo) 2 hG)r ， 




t G Mj 


同理有 


^Prj { t ) 

( b ) 由⑷推知 h ⑽和 bnWI = ke (!)| 4 . 

( c ) 由 （ b ) 推出，对任何 * e M ， 都有 < p v ( t ) 妾 Q , 因此，可以定义 / ⑴ - 
In I %⑷|，并且对其有/⑷ = 4/( t /2) ? t e M . 

( d ) 由 Ef < oo 可知 e C 2 ( E ), 再由 （ c ) 得 


t G 


G ) —. =/ "⑷ 


/ 〃⑷ = 广 


/" ⑼， teu 7 


故知 f "( t ) 为常数. 

( e ) 由⑷推得 /( t ) = at 2 + bt + c , 结合 （ c ), 可知 / ⑷ = at 2 . 

( f ) 由 （ e ) 推得外⑷二 e ia ( £ )+ a £2 , 其中 a ⑷可以取为连续函数，因为函数 
< f v { t ) 是连续的. 

( g ) 证明 a ⑷满足性质： 


a ( t ) = 2 a ( t /2 )，t 6 R . 

( h ) 由 E ;/ 2 < oo 推得 < p v ( t ) 在 t 二 0 处可微，再由 （ g ) 推知，当 k 


时， 


— > DO 


有 


⑷ a ( t /2 k ) 


a 


⑼， * # 0, 


t /2 k 


从而有 a ( t ) = a ; (0) t . 

总而言之，我们得知 < p v ( t ) = e ia ， ^ at \ 亦即 r ? 为高斯随机变量.同理,^ 
是高斯随机变量. 

11. (默瑟定理）设 r = r ( s , t ) [ a , 6] x [ a , 6] 上的连续的协方差函数，其中 -oo < 

证明，方程 




a < 6 < oo . 


b 


r ( s ^ t ) u ( t)dt = u ( s ), a ( s ( b 


A 


对于无穷多个数值 A = Afc < 0, k ^ l , 都有着相应的连 续解叫 = u k ( x ), d , 
这些解构成 L 2 ( a , b ) 中的完备的正交系，具有性质 

OQ 

( s 7 t ) — 


以 fe (沒)奴 fc ( t ) 


r 


A fc 


fc=l 
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其中的级数在 [ a ，6] x [ a ，&] 中一致绝对收敛. 

I 2 .设 X = { 不， t 彡 0} 为高斯过程，具有 EX t = 0和协方差函数 r { s , t ) = 

~ |t_s| , M 彡 0. 设0 < G < …< ，而 ^ n ) 是变量 ” ， 

X tn 的密度函数.证明， 


e 


ftl } - ,tn ( X l5 ? X Tl) 


一 1/2 




- 1) 


2 


2 




i 


x i 


— e 


(2 nrH(l 


i _ b )) 


2 (tj — 


exp 


— e 


1 — g2(tj _i —tj) 


i =2 


3=2 


13 •设 / ：= {/„ = f n ( u ), n ^ 1; u e [0,1]} M L 2 函数（依 [0，1] 上的勒贝格测 

度）的完备正交系，而6,…是独立同分布的 AT (0,1) 随机变量.证明，过程 
B t - E Cn/o / n ⑻也 ， （K K 1为布朗 运动. 

n^l 

14. 证明，如果= 网 ) 0 ⑽是布朗桥，则对莰= (1 + t)B 

B = ( B t ) t ^ o 是布朗运动. 

15. 设 S = ( B t ) t ^ 0 是布朗运动.证明，如下各过程都是布朗运动 •. 


随机过程 




刼 工) 


— — B t , t ^ 0; 

B t (2) = tB 1/u t >0, = 0; 

B ?) = B 

b[ a) =B t — Bt-u 对于 o 彡尤彡 r, T>0; 

>0, t^o (自模性) • 


一 B Sy s > 0， t ^ Oj 


t+s 


B t (5) 


B a n 


a 


16. 设价二（氏 + fit ) t ^ o 是带损失的布朗运动. 

( a ) M + Bf 2 (ti < t 2 ) 的分布. 

( b ) 试对 to < h < t 2 , 求 和 EBf 0 Bf 2 . 

17 . 设价是上题中的随机过程.试分别对 h < t 2 和 h > t 2 , 求条件分布 


P (邱 e • 1 邱 ); 


并对< t 2 , 求条件分布 


P(Bf a G - I Bf o , B^). 


18. 设 B = ( B t ) t ^ 0 是布朗运动.证明，对于％ = 


B e 2 t , 过程 y 二 ( Y t ) teR 是奥恩 
斯坦-乌伦贝克 （ Ornstein - UMenbeck ) 过程（即有 EF t ：= 0与 EY s Y t = e— t-s l 的 

高斯—马尔可夫过程). 


-t 
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19. 设 y = (Y t ) t€R 是奥恩斯坦 - 乌伦贝克过程 . 证明， 


0(1 — 叫 


， 0<亡<1， 


t 




一 t 


B° t = 


0 


t = 0, 1 


是布朗运动 . 

20. 设匕 , K2, … 是相互独立的标准高斯 AT(0,1) 随机变量 . 证明，级数 

\/2sin kirt 


B 卜 Ya 


， 0 < t < 1 


kn 


k=l 


事实上定义了一个布朗桥,而级数 


sin kirt 


砧 + $> 




O ^ t^l 


kn 


k=l 


则与级数 （ 26) — 样，给出了一个布朗运动 . 

21. 试详细证明，由 （ 26) 与 （ 28) 式所定义的过程 (B t ) 0<t<u 以及过程 


1 — cos mrt 


Bt = ^Y J ^n 


nn 


n=l 


( 其中随机变量序列 （ fn)n^ 与 （ 26) 和 （ 28) 式中相同）都是布朗运动 . 
22 • 设 X = (Xfc)KKn 为高斯序列，记 


2 


max EX fc 

l ^ k^n 


= max DX fc . 

l ^ k^n 


m = 


a 


今知对某个 a > 0 , 有 


(X k ~ EX k ) 


P 


max 

l ^ k^n 


证明，有如下的博雷尔不等式 成立 : 


x — m — a 


P < max Xk > x > ^ 2^ 

Il ^ fc^n j 


a 


其中 ^(x) = (27t)^ 1 / 2 /^° e~ y2 ^ 2 dy. 


23 •设 (X,Y) 为二维高斯随机变量，有 EX = EF = 0, EX 2 > 0, EY 2 > 0 以及相 

关系数 /> = veH 

(a) 证明，随机变量 X 与 Z = (F - pX)/^T ^ 为相互独立的高斯随机 


| p | < 1. 


变量 • 
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(b) 证明， 


一 1 


P{XY < 0} = 1 - 2P{X >0, r > 0} = 


7 T 


axccos p, 


并由此推出如下各关 系式 : 


P{X >0, F>0} = P{X <0, F < 0} 


T + 


axcsmp 




4 2tt 


d 


— p{x > 0 , y > o } = 


27T\/l — p 2 

P{X >0, Y <Q} = P{X <0, F > 0} = i 




arcsin p. 


4 2 丌 


(c ) 令 Z = max(X, y ), 其中 EX 2 = EY 2 


P 


2 


EZ ^ = 1. 


EZ = 


丌 


(d) 证明，对任何 a 与 6 , 都有 : 


M b )(i - 伞⑷) 


(1 - 也⑷ )(1 — 伞⑷ ） 《 P{X > a, y > 6} ^ (l-$(a))(l-$(c)) + 


V ?( a ) 


其中 c = (6 — ap)/^l — d = (a — bp)/^/\ — p 2 , 而 = 伞 '㈤ 为标准正态 

密度， 


提示： 命题⑹可以由性质⑷推出 . 

24. 设随机变量 X 与 1" 相互独立，其中 X 〜 AT(0,1 ), 而 P{Y = 1} = P{y = -1} 

| . 令 Z 证明， Z 〜 7V(0,1), 求随机变量对（ X ， Z) 与随机变量对 （ Y,Z) 

的分布，并求 X + Z 的分布 . 证明，随机变量 X 与 Z 不相关，也不独立 . 

25. 设 （ 为标准正态随机变量，即有 C 〜 #(0, 1 ) .令 




e, 如果 W ^ 
e , 如果 


a 


r/a = 


a . 




证明 ，〜〜 AT (0, 1)， 并且当 a 满足关系式 


a 


2 


/2 


2 


fd x ) dx = t M x ) 


一 x 


e 


x 




\/2 tv 


4 


o 


时，随机变量（与 r? a 不相关 ® ， 但却为不相互独立的髙斯随机变量（试比较定 
理 1 中的断言 a)). 


26. 设 e 与均为正态分布随机变量 , 有 E( = Er? = 0, Ee 2 = Et? 2 = 1 和 


P . 




证明， 


©原 书为： 随机变量《与 t ? 1/4 不相关——译者注. 
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(a) E max(^, n) = ^/(l- p)/n. 

(b) E(e \rj) = frri, D ⑹”) 二 1 

(c) E(C|^+ ?? = z) = z/2, D (化 + r? ： = 和 （1 - p)/2. 

(d) E(e + r ? |e>0,7 ? >0) = 2V^. 

试在 De = a ?, Dr ? = 4 的场合下考虑相应的问题,其中 q > 0, a 2 > 0. 

27.设泛）为二维高斯随机变量，具有相关矩阵 


2 


P • 


o 2 a 2 


( X , Y ) = 


cov 


a 2 a 2 


试将表示为如下 形式: 


X 


=Q 


Y 


r ] 


其中， Q 为正交矩阵，而 C 与 r ? 为相互独立的髙斯随机变量. 

28 .设€ = (6,…，匕）为具有零均值和相关矩阵 M = HEe ^ H 的非退化的高斯随 

机向量•设 R 的特征根为 Ai ，…， A n . 证明，随机变量0 +…+ 6的特征函数 
< p ( t ) 与随机变量 Aw ? + ...+ XnVn 的特征函数相同，其中％，...，恥为相互独 
立的标准髙斯随机变量（取〜 Y (0，1))， 并且可将 w ⑷表示为： 


n 




J =1 


29. 设匕，…，^是独立同分布的随机变量，其中 2. 证明，随机向量(&，•. ■，&) 

的分布函数为球对称的，当且仅当，随机变量匕,… ， Cn 中的每一个都服从零均 
值的正态分布. 

提示： 考虑特征函数. 

30. (关于正态分布 AT ( m , a 2 ) 的统计量 . I .)设 Ci ， …， Cn , n ^ 2,为独立同分布的正 

态 N { m , a 2 ) 随机变量.令 


n 


n 








n — 


k=l 


k=l 


证明，随机变量 f 与 g 相互独立,并且 


71—1 


(n-l)s? = ^(e fc -m) 2 . 


k=l 


提示： 利用前一题的结论. 
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31. (关于正态分布 M ( m , a 2 ) 的统计量 . H .) 设 Ci ， …，匕为独立同分布的正态 

AT ( m , a 2 ) 随机变量，而 

71^ 1. 


( a , …，^)是对于 e 二 （6, …， en ) 的观察值， 


X 


(a) 证明，统计量对 


n 


n 


Ti (x) = T 2 {x) = Yl x t 


fe —1 


k=l 


与 


l ^ 

工 = m , x fe 

n t 


Tl 


2 


S 


n 


k=l 


k=l 


都是充分统计量. 

( b ) 证明， 


n 


⑻ = ;t 


2 


X 2 . 


S 


k=l 


32. (关于正态分布 Af ( m , a 2 ) 的统计量 . IE : m 未知， < j 2 = < j §.) 在本题中，假设 

6,…上为独立同分布的正态 AT ( m 5 ( T 2 ) 随机变量，并需利用第30题 （n > 2) 
和第31题 （n > 1) 的结果. 


设 m 未知， a 2 已知，且 a 2 = 


⑷证明，对于㈠ ELi ^(= 讲⑹),有 


^0 


Ee = m ( 无偏性 )， Df = 


71 


( b ) 证明，（在假设 a 2 = ag 之下）样本均值无是有效估计,亦即最小方差的 
无偏估计.为此，请证明，关于参数 m 的无偏估计 T (; r ) 满足拉奥-克拉默不等 


式: 


DT (0 彡 


^ ln P(m )C rg)(0\ njul 


nE 


dm 


其中 


(£C 一 


P ( m ， cr §) ($) 


2a 


e 


0 




\/ 2?r<J 0 


(C) 证明，随机变量 




— m 


( To/^/n 


月艮从标准正态 A /^(0,1) 分布，且对于0 < £ < 1，当 A (£) 满足条件 


He ) 


2 


/2 dt (= 2少 ( A ( e )) — 1) 


— t 


— S 


e 


y 27 T 


—« X ( e ) 
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时，区间 


^0 


A(e), x + ^zX(e) 


x ~ 


\/n 


\/n 


是参数 m 的可靠性系数为1 - e 的置信区间，亦即“覆 盖概率 


1? 


^0 


A ⑷ ^ m ^ ^ + ~~ A (£) 






C - 


=1 — 


乞， 


(m ， crg) 


\fn 


y/n 


其中 P ( m ,^ Q ) 为具有密度函数 P { m ^ l ) 的分布（试比较第一章第7节第 2 小节 
中的定义). 

33. (关于正态分布 M { m , a 2 ) 的统计量 . IV : 

m 0 ), 那么就不必以 s 2 ⑻ = ^ Efc = i (^-^) 2 作为 〆 的估计，而只需用 


<7 2 未知如果 m 已知 （m — 


m 


爪 0, 




71 


^o(^) = - 爪 o) 2 

Tl u 


k —1 


来估计 a 2 了 ■ 

( a ) 证明， 


2a 4 


Eag ( e ) = a 2 (无偏性)， Bsl (0 




n 


的情形下）是 a 2 的有效估计，亦即最小方差的 


( b ) 证明 ， si ( x ) (* 

无偏估计.为此，需要证明，关于 P 的无偏估计 T ( x ) 满足如下形式的拉奥-克 
拉默不 等式： 


m = mo 


dt (0 > 


^lnp(m,crg)(0\ n/2cr 4 # 


nE 


dcr 2 


为了解决关于估计量 sl ( x ) 的精确度问题，我们利用下述方法构造关于 a 2 的置 
信 区间： 


对 


(別，… ， X n )， 令 


X 


2 


n 


Xfc — mo 


xl ( x ) = Y 1 


a 


fc=i 


由于 


n 


Xn(C) S (= X ^)， 


k —1 


故由第 8 节中的 （34) 式，知 xKO 服队自由度为 n 的 x 2 分布，其密度函 数为: 


尤 n/2 — lg—x/2 


fxl ( X ) 


Q 


=: 


2 打 / 2 r(n/2) 


(亦可参阅第 3 节表扑 
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又由于 


Xl ( x ) a 2 


Sq { x ) = 


n 


故知 


s o (0 


X 


n 


/ x : (輯 

(关于 x 2 分布，有关于 n 二 1,2,... 的许多分布值表格0所以，对于给定的 
0<6<1, 可以找到⑷和 A " ⑷，使得 


P 


彡 X 


( m 0 , erg ) 


< J 2 


入，⑷ 


£ 


f x 2 n { t)dt = 


= O # 




0 


此时就有 


A ；/ ( e ) 


fxl = 1 一 


£ 


入'⑷ 


并且由于 


4 ( x ) 


4( x ) n 


} 


n 


= {Y ⑷彡 xl(x) ^ A"(e )}， 


2 


^ cr ^ 


A 制 


A " ⑷ 


所以区间 


4( x ) 

" a ^ t , " a 7 ^) 


n 


就是关于 a 2 的置信系数为 1 - s 的置信区间. 

假设 a ' ⑷与 a ff ( e ) 被选取得使有 


"⑷ 


a 


fxl ^) dt = 1 - 


£. 


a ' ⑷ 


易知,这种根据给定的£ > 0,所选取的 a ' ⑷与 a "( e ) 并不是唯一的. 

( c ) 试问，对于怎样的 a '( e ) 与 a " ⑷，可以得到关于 < j 2 的最窄的置信系数 
为 i - e 的置信区间？它们是否重合于按照上面的办法所选取的 A ' ⑷与 A "( s )? 

34. (关于正态分布 Af { m , a 2 ) 的统计量 . V : m 未知， a 2 未知 _) 

( a ) 证明，在所考察的情形下，对于 n > 1, 

~ Yl xk ' 

n 


n 


n 


i 幻恥-旬 2 


-s 2 (x) — 


X 


n — 


n — 


k=l 


k=l 


分另! ] 是关于 m 和 a 2 的无偏估计. 

( b ) 证明，统计量 


x — m 


tn - 1 (工) 




S !( x )/^ 


具有自由度为 n -1 的学生分布. 
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提示：将 Q -1 ㈤ 表示为: 


x — m 


yn 


a 


1 (^) 




s \{ x)/a 


然后分别 指出： 

( i ) 分子服从标准正态分布 JV (0,1); 

⑻分母字的分布与相同，其中 d -： L 兰 Ek = i ^ 而仉，…， 
是相互独立的标准正态 a /*( o ， i ) 随机变量； 

( iii ) 随机变量与¥相互独立. 

由 ( i )( ii )( iii ) 和第8节中的 （38) 式，即可推出关于随机变量 t n ^(0 的分 


Vn—1 


布. 


(C) 试利用 i n _l(0 的分布，以及 tn-jix) 

的置信系数为1 - S 的置信区间. 

( d ) 首先证明随机变量 （n — 1) 

利用这一结果构造关于 a 的置信系数为1 - e 的置信区间. 

StS •设 $) 为第 28 题中的特征函数.证明，如果0 < 以 < … < 知，而 Pjfe 彡0,使 

得 = 则函数 


的表达式,构造关于 


x—m 




m 


8l(x)/y/n 


2 


siU ) 


服从自由度为 n - 1的 x 2 分布，再 




k —1 




亦为特征函数. 

36 .如果高斯序列 X = ( X n ) n ^ o 分别具有如下形式的协方差函数： 

和 { ij ) (= 2~ 1 {\ i \ + \ j \-\ i - j \)), 

那么它具有怎样的结构性质（独立增量，平稳，马尔可夫等等)？ 
37 •设 iV 为标准正态随机变量 （ iV 〜 j ^(0, l )). 证明，对于 a < 1，有 




hj = 0,1，2,…， 


e 


a 


E 


r 


| iV |« 2 厂 

38. 设 X 与 F 为相互独立的标准正态 ^(0,1) 随机变量.证明, 


E 


< oo . 


(x 2 + y 2 )p/ 


2 


当且仅当 p <2. 

39. 设第38题中的条件成立，而 


X 2 


(x 2 + f 2 )， 


T 


9 = 


x 2 + y 2 * 


2 
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证明， 


⑹ T 与 g 相互独立. 

( b ) T 服从指数分布 ( P{T > t }^ e ~\ t > 0). 

( c ) g 服从反正弦分布(密度函数为 x e (0,1)). 


7 T 


设 B 为布朗运动，而 


40. 


T a = min 0 : B t = a } 

为其首次达到水平 a > 0 的时刻.（如果 {.} = A 则令兀= oo .) 

试利用关于布朗运动的反 射原理 (P f sup 氐 

I J 

如，参考文献 [17], 第三章第10节, p 89-90), 证明，密度函数 p a (t) = 


2 P { B t ^ a }, 参阅例 


> a 




t > 


0,为 


a 


2 


/m 


Pa(t)= 


— a 


e 


V2irt 3 

提示：利用关系式 P { T a ^ t } = 2¥{ B t ^ a }. 


设 r = ，其中 r a 如上面的第 40 题所定义.证明 


41. 


law 


isr 2 , 


T 


其中 iv 为标准高斯随机变量 ( iv 〜#(0, 1)). 再证眠 r 的拉普拉斯变换和傅立 
叶变换分 别为： 


X 2 


2 


A 


一 2 


T 


N 


X 


Ee — 


= Ee 一 


A ^0 ? 
~^/2 


2 


2 


=€ 7 


it 


Ee itT = Ee 




t G M* 


N 


=exp 


事实上，随机变量 1/ iV 2 从结构上可以视为具有参数为 a = 1/2, (3^0, 0 = 
1, d=l 的稳定分布（参阅第三章第6节中的 （9) 与 （10) 式). 




42. 设 X 与 F 为相互独立的正态 M (0, < t 2 ) 随机变量. 

⑷证明 


X 2 - Y 2 


2 XY 


与 


VX 2 + Y 2 y/x 2 + Y 2 

为相互独立的均值为0,方差为1/2的正态分布随机变量. 

( b ) 由此推出 


X Y 
Y ~ X 

其中 C 为具有密度函数 1/( tt (1 + P )) 的柯西分布随机变量 （ a : e M ), 并且 


^ 2C, 


^ 2 C . 


C- 


C 
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( c ) 推广上述性质：对任何 a > 0 ,都有 


C -^ l ^(i + a )C. 


C 


x 


相互独立. 


⑷证明，随机变量 x 2 +户与 
提示： （ a ) 利用第8节第13题中关于 X 和 F 的表达式. 

( b ) 利用第 8 节中第 27 题⑷中的结论. 

( c ) 为证明所需结论，只需证明，如果 /( x ) = 

9⑻， 都有积分⑻)卷与积分 fZff ㈨ 泰 相等. 


^/ X 2 + Y 2 


则对任何有界函数 


x—ax 


1 +ci 


43. 证明，函数 


d ) 

为非负定的 （参阅 （ 24) 式 ) ，其中 0 < 丑< 1 ， M 彡 0. 并且存在 （零均 值的）高 
斯过程 M =(邱 )_ 以 R ( s . t ) 作为自己的协方差函数.（由周知的关于连续 
修正存在性的柯尔莫戈洛夫定理,例如,参阅 [17], 可以断言，能够将这样的过程 
B H = ( B t % >0 取为轨道连续的过程.该过程通常称为具有哈尔斯特参数丑的 
断口（分数）布朗运动. 

再证明，所述的函数 R ( s ， t ) 在 H >1 时不是非负定的. 

44. (达 尔穆亚-斯基托维奇定理） 设匕，… A 为独立同分布的随机变量，而 A ，…， 

，…，为非零常数.证明如下的刻画性 定理： 如果随机变量 而与 

1—1 

相互独立，则随机变量 6 ,…，^有正态分布.（在 
1 , b \ = 1 , 62 = - 1 时，即为第 10 题中的伯恩斯坦定理 .） 

45. 设 6，... 为相互独立的标准正态 AT(0,1) 随机变量序列.证明，随机变量 


2H 


R ( s , t ) = ~{ t 2H + s 




2 


dn 


2 ^ d\ 0^2 


n 




i—1 


i=l 


^ Yn = 


\r / ~ 1 = 

= v 


1/2 




E 沒 

t=l 


i=l 


时）依分布收敛到正态随机变量 ^( 0 , 1 ). 

46.设 ( X , Y ) 是具有 EX = EY = 0, DX = DF = 1的高斯随机变量对，相关系 

数为枚厂设伞⑻为标准正态分布函数，即 ^( x ) = (27 r )- 1 /2 j - ooe ^ 2 /2^. 证 
明，随机变量巾( X )与 ^( Y ) 的相关系数 p ^ x) 


(在 


n (X) 


等于 


，伞 00 


6 


: PX,Y 




— arcsm 


2 


7T 


47•设(叉， y ) 为三维高斯随机变量，有 EX = EF = EZ = 0, DX 

1以及相关系数 p { X , Y ) = p u p { X , Z ) = p 2i p { Y , Z ) = p 3 . 证明（试比较第 2 3 


BY = UZ = 
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题中的断言 （ b )) 


P{X >0, Y >0, Z >0} 

提示：令 a = {X > o }， B = { Y > 0 }, C = { Z > o }, 记 p = P(A n b n c )， 
则根据容斥公式（第一章第 1 节第 12 题)，得 


(arcsinpi + arcsin p2 + arcsinp3 ). 


X + 




8 4?r 


l~p = P ( AUBUC ) 

= [ P ( A ) + P ( B ) + P ( C )] - [¥{A C \ B ) + P(A nc ) + P { BDC )]+ p . 
再利用断言 23( b ). 

48. 设5。 = (风 ) 0 ⑽为布朗桥，以深表示其“振幅”，即 


2 


淡 = 


坷 -㈣ 


— [max 

7 T 


证明，振幅的平方％ 2 的拉普拉斯变换 Ee - 


入 > 0,为 


2 


vA 7 r 


— 


Ee 


sh Va 


7T 


49. (维斯可夫）设 f ? 与 C 为相互独立的标准正态 AT (0,1) 随机变量.证明， 

⑻对于任何满足条件 E \ f{x + (” + iC))l < 00 的函数/ = /⑷， z e C, 都 
有如下的“求均值” 性质： 


/⑻ = E/(x + (” + <))• 

( b ) 对于埃尔米特多项式 He n (x), n^O (参阅附录 p327), 都有 Re n { x ) 

E ( a : + 和 E He n ( a : + 17 ) = x n . 





























































































第三章概率测度的接近程度和收敛性. 

中心极限定理 


§1. 概率测度和分布的弱收敛 


1. 称定义在 M m 上的函数 F = F { x ) 处连续，如果对任给的 e > 0,都 

存在 △ > 0,使得 | F ( a :) - F ( y )\ < £ 对一切满足 r — 和 < y < a : + &的 

成立，其中 
F n => F ) 如果当 

Fn ( x ) F ( x ). 

证明，定理 2 的断言在空间 E m (m > 1) 中仍然成立.（参阅定理1的注 1.) 
提示： 只需证明⑴分⑷.为证⑴4⑷，设 : r e 是 F 的连续点.证 
明，如果谷(― oo ， rr ] 是集合 (- oo , a :] = (- oo , a ： i } 

P (9(- oo , a ;]) 0,因而就有 P n ((- oo , x ]) ^ P ((- oo , x ]), 亦即 F n ( x ) F ( x ). 

为证 m 中的反向蕴涵关系⑷4⑴，只需仿照1维情形下定理2的有关证明. 

2. 证明，在空间中，“基本集合”类 JT 就是 收敛确 定类. 

3. 设丑是空间 R ' C 或 D 之一（参阅第二章第2节).称（定义于由全体开集所 
生成的 a - 代数忒上的）概率测度序列 ( P n ) n>1 在 有限维分布的 意义上淡收敛 
到测度 P (记为 P „ 4 P )， 如果当 
集 A 都有 p n ( A )^ r ( A ). 


(1，…， 1) e IT ". 称分布函数序列（^^^淡 收敛于 F (记为 

时，在 p = F ( x ) 的任一连续点 x G 处都有 


e 


n — > cx > 


(- oo 5 a ; m ] 的边界，则有 


x . 


X 


攀 _ 


Bt , 对一切满足条件 P ( dA ) = 0的柱 


直译应为基本收敛，此处根据国内的通行称呼,译为淡收敛 


①原文为 ： CxCMIHTCH 


B OCHOBHOM, 


译者注 . 
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证明，对于空间 M °°, 有 


(Pn 4 P) 

试问，该结论对于空间 C 与 D 是否也成立？ 

提 示： ㈨ 式中的蕴涵关系 e 是显然的，我们只需证明 （ P „ 4 P ) ( P n ^ 
P ). S / Ji C ( M °°) 中的有界函数(|/| ^ c ). 对于 meiv = { l ,2，.. }, 我们定 
义 / m : M 


(Pr^ P). 


(*) 




M 如下: 


) ^ ， o ; m ，0, ()，•••）. 

则有 /m e C ( E °°), |/ m | < c , 并且对任何 z e M °°, 都有 f m ( x ) ^ f ( x ). 考察集 


fm (^1 ，•…， 5 


* • 


合 


{x G R °° : \} m { x ) - / ㈤ I 彡 e }， 


A 




证明，对于充分大的 n 和 m ， 都有 


fmdP 


fdP n ( eP n ( A m ) + 2 cP n ( A m ) ^ e + Ace . 




R°° 


R°° 


再利用对于每个 m 都有 fmdP - fdP 的事实，即可由上述事实推出， 
对于充分大的 n ， 有 


lim 


fdP 


fdP < e + 4 ce ， 




R°° 


R°° 


lim 


fdP n 


fdP 彡 e + Ace . 




R°° 


R°° 


由勒贝格控制收敛定理，知 fmdP - f ROO fdP , 再由上面两个不等式，即得 


fdPn ~ 


lim 


fdP ^ e + 4 c £ 


R°° 


R°° 


lim 


fdP n ~ 


fdP 彡 e + Ace . 


R°° 


R°° 


由 e > 0 的任意性，即可断言 


fdP 


fdP, 


n —> oo . 


R°° 


R°° 


4 .设 F 与 G 为数轴上的分布函数，而 


L [ F ， G ) = inf {/i > 0 : F(x - h ) ~ h ^ G ( x ) ^ F{x + ") + / i } 

是与 G 之间的）莱维距离.证明，淡收敛与依莱维距离收敛相互等价,亦即 


( F n ^ F ) 


( L ( F n , F )^0). 
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(F n ^ F) 可以立即由定义推出.反过 


提示： 蕴涵关系 {L{F ny F)-^0) 

来的蕴涵关系要用反证法证明，假设凡4 F ， 但是却有 Ld 泠0,然后找 

出矛盾来. 




5.设 F n 今兄而分布函数 F 连续.证明，此时风⑷向 F { x ) 的收敛对一 •切 xeR 
一致成立,亦即 


sup | F n ( a :) - F(x)\ 0, 

X 

提示： 给定 e > 0,取 m > 1/ e . 根据 F 的连续性，可以找到 
得 F ( xi ) = i/m\ 并且对于充分大的 n ， 有 \ F n ( xi ) - F ( xi )\ < e , i = 1，… 
这样一来,就对任何3： € [抑， Zfc + l ] (其中 


n oo. 


使 


无 1 ， … ， Tm— 1 


m—1. 




= oo ), 都有 


Xq — _ 00 5 Xffi 


F n {x) - F(x) ^ F n (x k+ i) - F(xk) < F(xk+i) + e - F(xk) = £ + 


< 2e. 


m 


同理有 F{x)~ F n {x) < 2e. 此即表明，对任何 xeR, 都有 \F{x) - F n (x)\<2e. 

6. 证明，关于定理 1 的注1中的断言. 

7. 证明，关于定理1的注2中的条件 （ I *)〜 （ IV *)的相互等价性. 

8. 证明， P n AP 当且仅当，序列 ( P n ) 的任一子列 （ P &) 中，都包含着子列 （ P #)， 
使得 P ? A P . 

提示：必要性显然.为证充分性，需要指出，假若 f P ， 则可找到有界 

0和子列（ V ),使得 


函数/， 


£ > 


fdPn.— 


fdP > e. 


E 


E 


此与存在 （ n〃）g (n ')， 使得 P 

9. 试举例说明，存在 （ M ， 潢 ( M )) 上的概率测度 P , 叉 ， n > 1, 对 其有叉 A P ， 但 
是对任何 B e ^( M ), 却都有 P n {B) P{B) 不成立. 

10. 试举例说明，存在分布函数 F = F{x), F n = F n {x), n > 1, 对其有 ^ 5 F, 但 

是却有 sup \F n {x) - F(x)\ /> 0 

X 

11. 在关于概率论的许多指导书籍中，有关分布 函数凡 (n > 1) 收敛的定理 2 中的 

命题⑷ #⑶ 往往与赫利以及布雷 (Bray) 的名字联系在一起.这种联系导致 
对如下命题的证明， 

(a) 赫利-布雷引理： 如果 凡冷 F (参 阅定义 1), 则 


P 的事实相矛盾. 


n — > oo - 


b 


b 


g(x)dF n (x) - / g(x)dF{x) } 


lim 


其中 a 与 6 均为分布函数 F = F{x) 的连续点，而 g 是区间 [ a , 別上的连 
续函数. 
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( b ) 赫利-布雷 定理： 如果 _ F n 今而 g 是 M 中 的连续函数，则 


g(x)dF n (x) 


g(x)dF(x). 


lim 




I 2 •设 F ， 对某个 & > 0, 序列（]>~仏 ㈤ )有界 • 证明，此时有（其中 

(/(.) = /:(■))): 


lim / \x\ a dF n (x) = / \x\ a dF(x) y 0彡 a 彡6, 


k 


k 


dF ( x)y 对一^切 A ; = 1，2 3 6 ， k ^ b . 


dF n (x) 


lim 


x 


x 




13. 设凡今 F ， 而 /i = med ( F ) 与如 = med ( K ) 分别为 F 和的中位数（参阅 

第一章第 4 节第5题).假设中位数 / i 和 Mn 对于所有 n > 1均唯一确定.证明， 


M - 


Mn 


14. 设分布函数 F 被自己的矩序列 

假设 (F n ) n>l 为分布函数序列,使得 


(^) ^ 


J^° oo x k dF(x), k 


1，2,…，唯一确定. 


m 


=： 


(fc) 一 


(fc) - 


k 


k 


dF n (x) 


dF(x) y k = 1，2, • " • 


—> m 


m 


x 


x 


oo 


证明，凡今 R 

15 .设 M 是距离空间 （ E, A p) 中的 a - 有限测度， 其中# 是由博雷尔集合构成的 

a - 代数.证明，对一切 5 e 忒 , 都有 


li { B ) = sup ii { F ) - inf u ( G ), 

FCB G ^ B 

其中, F 与 G 分别为#中的闭集与开集. 

16. 证明，数轴 IR 上的分布函数序列& (n > 1) 弱收敛到 F (风 A F ), 当且仅当, 

在 M 存在一个处处稠密的集合使得对任何 xeD , 都有 F n { x ) F ( x ). 

17. 设 g (： C ) 与 (5 n (^)) n ^ l , X eR , 为连续函数，使得 


SUp|^ n (^)| ^ C < OO, 


且对任何有界区间 B = [ a , 6], 都有 


lim sup |£Tn(^) - 5(^)1 = 0. 

71 

证明，如果成立分布函数的收敛关系凡今 f ， 则有 


lim / g n (x)dF n {x) 


g(x)dF(x). 




E 


E 




























































































第三章概率测度的接近程度和收敛性.中心极限定理 


■ 160 - 


并举例说明，对于该收敛性，仅仅有逐点收敛 9 n ( x ) -> g ( x ), H ， 通常是不够 


的. 


18. 设分布函数序列 K 令忍 

( a ) 试举例说明,一般来说, 


71 OO. 


xdF n ( x ) 7 ^ / xdF ( x ). 


R 


R 


( b ) 证明，如果对某个 k > 1，有 sup J R lx \ k dF n ( x ) < 

1彡- 1，都有 n 


则对 一 '切 


C < 00, 


I 


dF ( x ) • 


x 


R 


R 


19. 推广上题，证明，如果/ = /⑻为连续函数，未必有界，但具有如下 性质: 


1/㈤I 


lim 


0 5 


5⑻ 


kl 


其中5 = 5 ㈤ 是正值函数，使得 SUp ^ C < OO, 则有 


f { x ) dF n ( x ) / f ( x ) dF ( x ). 


R 


R 


§2. 概率分布族的相对紧性和稠密性 


1. 对空间] R n ，n > 2,证明相应的定理1和定理 2. 

2 •设是数轴上的参数为 m a 与 a 2 a (a G u ) 的高斯测度 • 证明，族妒= { P a : 

e u } 是稠密的，当且仅当，存在 a 与6,使得 


a 


2 


^ 6, a G u . 


彡 a, 


m 


cr 


提示： 充分性的 证明： 对任何 aGu , 均可找到随机变量 


碌1)，使得 

G 二 m a 十 a a 7] a . 将此与题中条件相结合，得知 P {| 匕 | P {\ rj a \ ^ ^}, 

由此即得 { P a } 的稠密性.必要性可用反证法证明. 


T}a 


3. 试分别举出定义在 （ M °°，^( E °°)) 上的稠密的和非稠密的概率测度族少= 
{Pa ： Q ； G u } 的例子 ■ 

提示： 考察下列概率测 度族： 

( a ) { P a }, 其中 P a 三 P , 而 


1,如果（0,0,0,...) e A ， 
0,如果(0,0,0, ■ ■ ■) 贫 A . 


P ㈤ 


( b ) { P n : n G N }, 其中 P „ 为集中在点 


= ( n ，0,0, …）上的概率测度. 


X 
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4.设 P 是距离空间 （ E ， 夂 p ) 中的概率测度.称 P 是稠密的 ® ，如果对任何£>0, 
都存在紧集 K Q £，使得 P ( K ) ^ 1 

希空间（即完备可分的距离空间）中的任何概率测度 P 都是稠密的. 

5•设 X 二 { X a ; 

supE || X a || r < 




证明如下结果（“乌拉姆定理”)：波利 


— £. 


u } 是某个随机向量族 （ X a G E d , a G u ), 对某 
证明，分布=： Law ( X a ) 的族少= { p ^; a G u } 是稠密的. 


0, 有 


a G 


r > 


oo . 


6. 证明，对于随机向量族仿 ， f e 了}，其中随机向量匕取值于空间 R ' 稠密性条 
件等价于条件 


lim sup P { || ^|| > a } = 0. 

Q — ►OO 

( a ) 证明，对于随机向量族 {6, fc > 0}， 其中随机向量6取值于空间 
稠密性条件等价于条件 


lim lim P {| lCfc || > a } = 0. 


( b ) 证明，如果 k ^0} 为非负随机变量序列，则稠密性条件等价于条 


件 


lim lim (1 — Ee 一入匕 ） = 0, 

AiO n—oo 

7 •设 ⑸ k >0 为取值于，的随机向量序列，且& 即随机向量心的分布凡 

弱收敛（等价于淡收敛）到随机向量 C 的分布证明，族 {&, k ^0 } 是稠密 


的. 


8•设 (^)^0 为稠密的随机变量序列，而对序列 (^)^0, 有 f ] k 二 k 
明， ^0, k 

9.设 X 2 , …为可交换随机变量的无穷序列（参阅第二章第5节第4题中的定 
义)，并设足仅取0和1两个值 • 

证明如下结果的正 确性： 存在区间[0，1]上的一个分布 G = G ( A ) ? 使得对 

任何 n 彡1及任何都有 


oa 证 


- ^ OO . 


1 

X k ( l - X ) n - k dG ( X ). 


P {^1 = 1 ，…， Xfc = 1， Xfc +1 =()，••• } X n =0}= 


o 


(该结论是著名的费内提定理的特例，该定理 断言： 任何可交换随机变量的无穷 
序列都是若干个独立同分布的随机变量序列的 混合; 参阅 [33] 和 [2].) 

., X n = 0}, 将概率 P (為0 


提 示：令 A 二{4 = 1， 


■ ,Xk = l.XkJrl — 0 , 


* t 


表示为 


P(Afc) = ^P(A fc |5 m = j)P{S m =j}, 


W 


j~o 


①原 文为： nJIOTHOii , 直译为稠密的，但根据国际上和我国的通行叫法，应当译为胎紧，现为保持 
原书面目，译为稠密的——译者注. 
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771 


其中 m > n , 而= E 再利用可交换性，证明，可将 （*) 式的右端写为如 

下形式： 


fc — 1 


n—fc— 1 


—0 . II — 


n (饥 一《) 


J =0 




1=0 


其中 4 = 普.（对于充分大的 rn ， 该式近似于 EK (1 - y m r - fc ].) 然后，令 

并证明其极限可表示为 Jo 1 A fc (l - X ) n ~ k dG ( X ), 其中 G ( X ) 是区间 [0,1] 


m — > oo 


上的某个分布. 


10. 设匕，…上是仅取0和1两个值的可交换随机变量.证明， 

⑷ Pfe = 1 ] s n ) = 其中 5 n = ^1 + - - * + C 

(b) P(fi = 1, 0 = 1 I Sn) ^ 

11. 为推广第一章第 11 节中的定理2,证明，如果 

的可交换随机变量，而乂 = 7/1 +…+取，1 < fc < n ， 则 


n * 


Sn(S n — l) 


，其中 Mj . 


n(n — 1) 


，加是取值于 {0，1，2，〜} 




拳馨華 


S n 


P(Sk < k M 一切 1 ^ fe ^ n I S n )= 


n 


§3. 极限定理证明的特征函数法 


1. 证明,定理1中的结论在 (n > 2) 时仍然成立. 

提示: 证明与一维情形类似，但是需要建立多维场合下的引理3,其形 式为: 


K 


dF ( x ) ^ 


(1 — Re 


n 


a 


A 


B 


其中 


G IR n i \xi I ^ 一 ，•… 


^ aj 5 

B ~ {t Q IR n i 0 < < ct ，• • • ， 0 < < fl }. 


A = 


x 


x 


n 


a 


2. (关于大数定律)⑷设&&，•.•为独立随机变量序列，具有有限的期望 ElCnl 与 
方差证明，大数定律成立，即对任何 e > 0,都有 

+ …+ E(^i + ••. + &) 




P 


(*) 


> 0 , 


> e 


n — > oo . 


n 


n 


⑻设 6,6, …为具有有限的期望 E | C n | 与方差彡尺， n ^ l 的随机 

(6, Cj ) d i 关 j . 证明，大数定律 （*) 成立. 

提 示：在 （ a ) 与 （ b ) 的证明中应当运用切比雪夫不等式. 


变量序列，并且其协方差为 


COV 


§3. 极限定理证明的特征函数法 
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( c ) (伯恩斯坦) 设匕 ，匕…为具有有限的期望 m n \ 与方差 

时，其协方差具有性质 cov ⑸，心） 


1的随机变量序列，并且当 \ i - j \ 

证明，此时亦有大数定律成立. 

提示:证明，在所述的条件之下，有 
⑷设 Ci ，6, …为独立同分布的随机变量序列，令 /in = EKi /(|6 l ^ n )]. 


0. 


— 00 


0 


n — > oo . 


假设 


lim xP {|^ i | > x } — 0. 


证明，此时有如下形式的大数定律成立: 


S n 


P 


0 


— 


n 


其中，如同往常,有& = 6 +…+ &(亦可参阅第20题). 

提示:对固定的 s > 0,令 g 8) =匕 7( 旧彡 s ) 与 


⑷ 


桃严+…+次)]. 




写 


P{|^1 + •*. + €«_ I > t} 

0_ 2 D(d s) + ... + 比 )）+ P{6 + • •, + Cn _ CP + … + 比 ) }. 

和 t = en，e > 0) 


利用这一估计式，推得（令 

+ • • • + fn 


S = 71 


- E [ Ci /(| CiKn )] 


P 


£ 


n 


n 


xP {|^ i | > x}dx + nP {|^ i | > n } 




^ 2 n Jo 


由此即可得出所需的结论. 


3. 作为定理 1 的推论，证明，函数族 {# 
间上，收敛性〜 


>1} 是等度连续的，而在每个有限区 


n 


717 


都是一'致的. 

提示：所谓函数族{%， n ^ l } 等度连续，其含义是,对每个 e > 0,都存在 
^ > 0,使得对每个 n ^ 1,只要 \s - t \ < S , 就都有 | y ? n ( s ) - ip n ( t )\ < 

如果 F n A F , 则根据第 2 节中的普罗霍洛夫定理，对一切 e > 0,都可找到 
>0,使得 J dF ； < e，n > 1.如此一来，就有 


9 


— > 




a 


|x | 彡 


a 


itx 


¥? n(t + / l ) — y ? n ( t )| 彡 


— l \ dF n + 2 c , 


e 


|x|< 


a 


由此不难推出函数族 {#„， n ^ l } 的等度连续性.然后利用这种性质，即可推 
出， 在每个有限区间 [ a , 6] 上，都有 


SUP ⑷ 1 ⑴ I— 0, 

te [ a , b ] 


71 00. 
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4•设 n ^ 1,为随机变量序列，相应的特征函数序列为 nn ( t ) 

61 五 0 ,当且仅当，在 t = 0的某个邻域中，有 抑 n ( t ) — 1， 

提示： 在充分性的证明中应当首先运用引理3，由其可以推出测度族 
{Law (匕)， n 彡 1} 是稠密的. 

5 •设 X lz X 2 , … 为独立同分布的（取值于舻的）随机向量序列，具有零均值和 
(有限的）协方差阵 r . 证明 


^ 1. 证明， 


n 


n — ^ oo . 


义1 +… • + X n 


4at(o, r). 


\/n 


(试比较定理 3.) 

提示:根据第1题，只需对每个 t e M fc ， 证明 

Ee i{t ^ n) -> Ee 咐)， 


n —> oo 


其中^ = n ~ 1 ^{ X 1 + •.. + X „) ，而 $ 〜 AT (0, T ). 


6. 设 K 2 , …与矾, r / 2 , …为两个随机变量序列，对每个 n ， 随机变量&都与 
独立.假设当 


^71 


时，有 Cn 三$ 其中随机变量 （ 与 T ； 相互独立. 

( a ) 证明，二维随机变量序列（匕，加）依分布收敛到⑷ 7 /). 

( b ) 设 f = f ( x , y ) 为连续函数.证明，随机变量 f h ) 依分布收敛到 


n —> oo 


m vy 


提示： 收敛性 （&， 加 ） 4 K W 可以由第 1 题中的命题推出.为证收敛性 
/(Cn, Vn) ^ /(^ rj ), 需要考察复合函数 ( fiof ： R 2 -> M , 其中 ip ： E -> M 为有 
界连续函数. 


r . 试举例说明，定理2断言2中的关于极限特征函数冲）=在 f = 0处 

的连续性条件,一般来说，是不能削弱的.（换言之，如果 ^(1) 不在 t = 0处连 
续,则可能出现这样的情况：尽管 ip n ( t ) -> ip ( t ), 但是对任何分布函数 F ， 却都 
有仏 A F .) 试举例说明,取消 p ⑷在 t = 0处的连续性条件，可能会破坏与特 
征函数族 外⑴， n 彡1，相对应的概率分布族 { P n ： 71^1} 的稠密性. 

提示： 可以考察期望为0, 方差为 n 的髙斯分布凡. 

S . 作为引理 3 中的不等式⑷的补充，证明，如果$为具有特征函数以 t ) 的随机 
变量 ，则： 


( a ) 对任何 a > 0,都有 


p {| eKa -1 } ^ - 


\( p ( t )\ dt . 


a 


|t|<a 


( b ) 对正数 & 和有 


2 


2 tt 


<5 


bS 


P{|Cl 彡以 


Re ip { t )] dt . 


6 


o 


L 


§3. 极限定理证明的特征函数法 


. 165 • 


( c ) 如果$为非负随机变量，而 狀 a ) = Ee _< 为其拉普拉斯变换 （ a 彡0)， 


则有 


P{^^a- 1 }^2(l-^(a)). 

9 •设…为取值于酆的随机向量，证明，6 4 fc 
HP ! t e M n , 都有 


当且仅当，对 


— ^ 00 , 


d 


(6, t ) A ( e , t ). 


(本结果建立在克 拉默-沃尔德 （ Cramer-Wold) 方法 的基础 之上， 该方法将验证 

M n 空间中的随机向量的依分布收敛归结为验证相应的一维随机变量的依分布 
收敛性 .） 


10. 作为定理2 中的辛钦大数律 (或称 为辛钦准则） 的补充，试证明如下形式的大数 


定律: 


设6, &，…为独立同分布随机变量序列，& = 6 +…+ Cn , 0 < p < 2.贝! I 
对某个常数 c e M ， 有 


P 


n^^Sn 


当且仅当，当 

( a ) 当 p < 1 时， r p P {| Ci | > r } — 0,且 

( b ) 当 P = 1 时， rP {|$ i | > r } — 0,且 E ^/ dai ^ r )] 

( c ) 当 p > 1 时， r p P {|$ i | > r *} — 0,且 E 。 

11. 设6，&，…为独立同分布随机变量序列，乂 + •..+&， n ^ l . 证明，当 

B 寸, n -^ 2 S n 依概率收敛，当且仅当, P {6 = 0} 

12•设 F ㈤ 与 ㈤ ) 心 i 为分布函数，而 p ⑷与为对应的特征函数. 

证明,若有 


时①，有 


r — > oo 


0 . 


C 




―> C. 


0 . 


C 






1. 


n — ^ oo 




snp \ tp n ( t ) - ( f { t )\ — 0, 


则亦有 


sup \ F n ( x ) — F ( x )\ —> 0. 

X 

13 .设 Ci ，6, …为独立同分布随机变量序列，服从共同的分布 F = F ( x ), 而& = 

Ci + …+ Cn ， n 彡 L 

证明大数定律的如下形式（柯尔莫戈洛 夫)： 为了存在常数序列 ( a n ) n ^ u 使 


得 


S n 


P 


(*) 


— a n ―> 0 


n — > oo , 


n 


必须且只需 


nP 他 I > n } — 0, 


* 氺) 


n —^ oo 


© 原书错为 “ 当 r — 0 时 ”—— 译者注 . 
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或者，等价地有 


[1 — F(x) — jP (— x )] — 0， 

在这些假设之下，有 a n - EKi/dCil “)] -> 0 
( an ) n ^ i 的存在性称为序列 (^) n>1 的柯 尔莫戈洛夫意义下的稳定性 .） 

14. 证明，如果 E ⑸ < 00,则在上题中有条件 （**) 成立，此时可取 

= E 6( 试比较定理2,即关于大数定律成立的辛钦准则，以及第10题和第13 

题中的断言). 

15. 设心，6,…为独立同分布随机变量序列，取值土3, ±4, ... 的概率分别为 


X 


(满足条件的数列 


n — > oo . 


其中 


= m, 


a 


m 


c 


P{Ci= 土工 }= 


x = 3, 4, … 


2a; 2 In x ’ 


其中正则化常数 


E 


c = 


2 


In a; 


x 


fc=3 


证明，尽管此处有 E&I 二00,但是却仍然有第13题中的条件 （**) 成立，并且 
可以取知三0,因而意味着含 

注： 应当指出，在上述场合下，由于随机变量&，&，•••不存在有限的数学 
期望 ( E | Ci | - oo ), 因此也就不可能成立辛钦形式的大数定律 ( n^Sn 
中 m = E &; 见定理 2). 但是这并未妨碍其中的随机变量序列匕，6,…具有 
柯尔莫戈洛夫意义下的稳定性（参阅第13 题)： 


P 


()• 


其 


— > m ， 


S n 




(=0)， 


m 


n 


其中 m = 运6是由柯尔莫戈洛夫所定义的 广义数学期望 (见参考文献 [60 j , 第四 
章，第4节)，其中 




E$i = lim E 


后来，这种广义数学期望被称为柯尔莫戈洛夫 A - 积分.（现在，在分析学中，称 
博雷尔函数/ = /⑻， z G 1 R , 是 A - 可积的，如果该函数： 

( i ) 在弱意义下属于 L 1 (亦即 li^an A{;c : |/( x )| > n } —► 0), 

( ii ) 存在极限 lim f f n { x ) X { dx ), 其中 A 是 （ M ，^( E )) 上的勒贝格 

71 {x: |/(x)|^n} 


测度. 


通常将这样定义的积分表示为 ( A ) ff ( x ) X ( dx ). 有趣的是，对于这样定义 
的积分，许多通常的勒贝格积分的性质,一般来说,都是不成立的.例如，可加性 
就可能遭到破坏 
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16•设6,6,…为（具有有限数学期望的）独立随机变量序列，对某 J G (0, 1), 有 


E E i^i 


1+5 


0 


71 00. 


1+<5 


n 


证明，该 "(1 + S ) 条件”可以保证大数定律成立: 


p 


E (& - 阳) 


0, 


n — > oo . 


n 


17. (针对定理3;不同分布随机变量场合）在定理3中，曾经（运用特征函数方法) 

在独立 同分布 随机变量的场合下给出了中心极限定理的证明， 其 中的依据是连 
续 性定理（定理 1). 运 用这一方法也可以证明独立 不同分 布随机变量场合下的 

中心极限定理，其基本思路如下. 

设^ 1 ^ 2 ,••-为相互独立的随机事件序列，有 P(A n ) = 1 /n (第二章第4 
节第21题中的随机事件序列就是该类事件列的例子).令 Cn = 记& = 
+…+ Cn - 证明 




00)， 


n 






(~ lnn 5 n —► oo). 


再考察随机变量 (n ^ 1) 的特征函数 < p n ( t ), 可证明有外⑷— e -^/2, 
因而（定理 1) 就有中芯极限定理成 立：当 


时，有 


S n — ES n 


屯 (x)’ x G M. 


P 


彡 x 




18. 作为引理3中的不等式⑷的 补充， 证明如下不 等式： 对一切 a > 0,都有 


a 


^ / [1 ™ Re ^ 2 


(1 — sinl ) 


dF(x) + 


2 




a 




0 


提示： 为证不等式的右半部，应将1 - Re 以 t ) 表示为 


1 — Re (p(t) = / (1 — cos tx)dF(x) 


R 


(1 — cos tx)dF(x) + 


(1 — cos tx)dF(x) 


\x\^^/TJa 


\x\<y/l/a 


分别估计上述两个积分，然后（像引理3中那样）利用富比尼定理. 
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19•设 ( Cn ) n ^ l 为独立同分布的随机变量序列，服从柯西分布，密度函数为 


$ 


0 >0 7 X eR. 


tt (0 2 -f x 2 ) 

的分布函数凡弱收敛到参数为 a = 1的弗雷歇分布 


证明，随机变量 

(参阅第二章第8节第48题)，即随机变量 1/ T C 的分布，其中 T c 服从参数为 
O / tt 的指数分布： 




C = 


c/x 




， x > 0. 


= e 


T c 


20. (离散变量场合下的连续性定理）设 d &，…为取值 fc = 0,1,2,…的随机变 

量序列.记 


G(s) = = 与 G n (s) = J2 P ^ = k}s 


k 


k=0 


fc =0 


分别为随机变量 f 与 (n > 1) 的母函数. 


证明， 


limP{^ n = k} = P{^ = fc }， fc = 0,1 ， 2 ,…， 


当且仅当 


limG n (s) = G(s )， s € [0,1)* 

n 

21. 试用特征函数方法证明第二章第 10 节第35题中的命题.（服从区间[-1，1]上 

的均勻分布的随机变量的特征函数为^.) 


§4. 独立随机变置之和的中心极限定理 I . 林德伯格条件 

1.设…为独立同分布随机变量序列，有 E 技 < oo . 证明 

max (|6| ，… U ) 


d 


0, 


n —> oo . 


y/n 


(试比较第二章第 10 节第 53 题 .) 

提示： 利用 


max (⑸，…，|匕|) 


<e? = P{Ci ^ ne 2 } 


P 


\/n 


及 ne 2 P{^i > ne} 0, 

2. 试直接证明，在伯努利场合下 snp \ F Tn ( x )~ ^( x )\ 的阶为^ 


71 —> OO. 


① 


n — ^ 00 , 


Q F Tn (x) 是随机变量 T n = 的分布函数，其中…为独立同分布的对称伯努利 

随机变量序列，即有 P{^ - ±1} = 1/2 


译者注 . 
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3•设 J ^， X 2 ，…是可交换随机变量的无限序列（参阅第二章第5节第4题)，有 
EX n = 0, EX ^ — 1, n ^ 1. 假设 


㈤ ，路 

证明，对于这样的随机变量序列，有 中心极限定理 成立: 

▲公 1 ). 


( X u X 2 ) = 


(*) 


cov 


cov 


(**) 


i=l 


反之，若 （**) 成立，则 （*) 亦成立. 

4. ( a ) 关于格子点随机变量的局部极限定理. 设…为独立同分布的随机变 

ECi , . 令 5 n = Ci + •- - + ^，n 彡 1，并假设6乂2,…为格 

子点的随机变量，其可能的取值为 a +战其中= 0, ±1，土2,…，且（最大）步 
长为 h > 0. 

证明 ，当 


量，有 




时，有 


71 




2 


(hk + an — nfi) 


P{5 n = an + kh} 


0. 


sup 


exp 




2a 2 n 


h 


k 


<7 


(试比较第二章第 6 节中的局部极限定理 .） 

提示： 可以运用下面的以自身的特征函数的性质为基础的变换来证明题中 
结论.根据第二章第12节第9题，有 


U 


+ kh} = Plh—ifjSn — an) = k}— 


—iuk 


\una 


P{S n 


du ^ 


h 


an 


e 


e 




2 tt 


h 


X 


其中⑻是随机变量 6 的特征函数.另一方面,显然有 


2 


e iuz e -u 2 /2 d ^ 


/2 


—Z 


e 


V 2 


7T 


oo 


因此 


y/n 


a 


2 


/2 


P{5 n = an + kh} — 


2 tt 


e 


h 


2 tt 


-t 2 /2 


2 


， 2 dt. 


-t 


dt + 






— e 


e 




n^/n<T 




<T 


| t |< 


h 


上述表达式的右端与 a ： 无关,故只需证明当 

( b ) 关于有密度的随机变量的局部极限定理. 设匕，&,…为独立同分布的 
随机变量 ，有 m 二 E 。 

有密度函数 


时，右端趋于0即可. 


n oo 


D 6 假设心的特征函数 p =冰）可积,从而它具 


2 _ 


，^ 


—itx 


/㈤ 




e 


2tt 
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( 参阅第二章第 12 节定理 3.) 

以 /n = fn{ x ) 表不 — ^1 + ' * * + ^ 1) 的密度函数 . 证明，当 


71 — > 00 


时，有 


2 


(x — rtjj) 


sup Vn/n {x) 


a 


exp 




2cr 2 n 


V2 


7T(7 


X 


提示 : 按照格子点情形下的类似步骤进行证明 . 

5. 设为独立同分布的随机变量序列，有 EX 1 = 0, EX? = 1 .设 
由 ▲… 为非负常数， 有 d n = o(D n ), 其中极 = f ： 4. 证明， “ 加权，’随 

机变量序列 chX u d 2 X 2 , … 满足中心极限定理： 




n 


1 ). 


D n 


k=l 


6 • 设 … 为独立同分布的随机变量，有 = 0, E 玢 =1 ，令 & = 匕 + 
…+&， n > 1 • 设 (r n ) n>1 为仅在集合 {1,2,-..} 中取值的随机变量序列，有 
r n /n 孓 c ，其中 c > 0 为常数 . 证明， 


Law (d) 

( 亦即 Tn 1/2 S Tn 4 e, 其中 f 〜 AT(0, 1)). ( 应当指出，此处并未假定序列 
与序列 (en)n>l 的相互独立性 .） 

7• 设 Cl ， & ， … 为独立同分布的随机变量，有 E& = 0, E 红 = 1 . 证明 

S m ) -> Law (| 如，其中《〜 #(0, 1), 


$ 


一 1/2 


Law (n 


max 

l ^ m^n 


换言之 , 对任何 : T > 0 ,都有 


X 


2 


2 


一 1/2 


/2 dy 


erf(x) ] • 


-y 


P 


Sm 《 X 


n 


max 

l ^ m^n 


e 






V 2 


7T 


0 


提示： 首先证明所述结论对相互独立的对称伯努利随机变量序列 … 
成立，其中 Pfe 二 ±1} = 1/2. 然后利用所证的结果（也可直接证明，但难度较 
大 ) ，证明，极限分布的形式对于任何具有所述的矩性质的独立同分布随机变量 
序列 6 ， & ， … 都彼此相同 . （这种极限分布与具有 E 匕 = 0, Eg = 1 的独立同 
分布的随机变量序列 H. 的具体分布无关的性质称为 “ 不变原理”，可参 

阅，例如 , [9] 和 [17].) 

8. 在上题中的条件之下，证明 


- 1/2 


|^ m | 彡 


H(x), x > 0 y 


P 


n 


max 

l ^ m^n 


X> 
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其中 


k 


2^2 


(- 1 ) 


(2fc + l) 


聲江 

I _ 

9. 设 X 1; X 2 ， … 为相互独立的随机变量序列，有 


7T 


exp 


Sx 2 


2fc + l 


fc =0 


其中 2a>/?-L 


P{X n = 0} = 1 


P{X n = ±n a } 








2， 

证明，林德伯格条件成立，当且仅当， 0^/?<1. 

10 .设 X 1) X 2 ,-- - 为独立随机变量序列， 有 X n 《 c n (P-a.sO, 且 = o(D n ) } 其中 


n 


L>^^E(X fc -EX fc ) 


2 


—> OO. 




证明， 


s n — ^jS n 


4aT(0, 1) ， 其中 5n = Xi + *.- + X n . 

11 . 设 X U X 2 , … 为独立随机变量序列，有 EX n = 0, EX2 = al 假设对其有中心 

极限定理成立，并且 


D n 


k 


n 


(2k)\ 




对某 > 1. 


2 k k\ 


证明，此时必有 fc 阶林德伯格条件成立，亦即 


n 


\x\ k dF j {x) = o{D k n ), 


e > 0. 




3= 


( 通常的林德伯格条件相当于此处 A: 二 2 的 情形； 参阅⑴式 .） 

12. 设 X = X(X ) 与 Y = Y(fi ) 是相互独立的参数分别为 A > 0 和 M > 0 的泊松随 

机变量 . 证明， 


(X ( 入） 一 A) — (Yifj) - /x) 


五卵， 1 )， 当 A 


OO , P 


— ^ OO. 


y/xwTYijr) 


设对每个 n^l, 随机向量 , X^) 都是均勻分布在单位球上的 n + 1 
维的随机向量 . 证明，如下的（庞加莱）命题成立：对一切 z €艮都有 


13 - 


X 




2 


(n) 


^ 2 du . 


一 U 


lim P 


X 


彡 x 


e 


n+1 


\/27 T 


14. 设 6, &2,… 为相互独立的 AT(0, 1) 分布随机变量，而 So ：= 0, 5W = Ci +…+ 

Cn, n ^ 1 . 试求 （n 


时）如下随机变量的概率分布 : 


— ^ OO 


71 


y^i^fc-ii^fc - 1) 


n 彡1, 


n 


fc=l 
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15.设…为独立同分布的对称伯努利随机变量序列 ( P {6 = 1 } = P{fi = 

一 1} = 1/2 )， iB So = 0, Sa ； = + …+ “， k > 1, 

构造连续的过程 X ( 2 -) ^ (幻 271) )叫即，其中 


^2 nt 


(2ti) 


V 2 n } 


而对于 W > 0,将&定义为两个相邻的整数时刻之间的线性插值. 

试给出证明下列（重要而困难的）命题的思路. 

Law ( X t (2n) , 0 < ^ < 1)( 在有限维分布弱收敛的意义下，在赋 
予了一致距离的距离空间 （7 中的分布弱收敛的意义下）收敛到布朗运动 B = 
( B t ) 0 ^ i 的分布 P = Law (战，0<^1). ( C 中的弱收敛是唐斯克尔-普罗霍 
洛夫 ( Donsker - Prokhorov ) 不变原理的特殊情况，所以应当参阅第七章第8节第 


2n 


( a ) P 


1小节 .) 


( b ) 条件分布 Q 2 - = Law ( X t (2n) , 0 < t < 11 ^ 2 n ) )( 在⑷ 中所说的意义下) 
收敛到布朗桥 B 。 = ( B t °) 0 ^ i 的分布 Q = Law (坷， 

提示: 利用第 13 节中推出柯尔莫戈洛夫极限分布时的分析方法.更详细的 
推导可见参考文献 [9] 和 [17]. 


16. 由上题的结果（试比较第7题与第8题中的结果）推出下列关 系式： 对于 x > 0, 


( ai ) P 


(- P {| 执 |<叻， 


—7=： max Sk x 
y 2 n o 彡 fc 彡 2 n 


max Bt ^ x 

Io^t^i 




( a 2 ) P 


—7= max Sfc 彡 x 


p 


B t 


max 

o^t^i 


和 


( bi)P 


冗 ㉝ 仏说 52 ^ 0 




P 


max 


l^fcl < x S 2n = 0 


( b 2 )P 


I 坷 Kx • 


P 


— 7 = max 
V2n 0 私 2 




max 

O ^ t^l 


n 


17. 作为第 15 题和第 16 题的继续,证明如下各关 系式: 


( a ) P 


Sk — min Sk 

0^ fc ^2 n 


> P s max B t — min B t < x 

o ^ t^i 


— p = max 
\/2 n [ 0 ^ k ^ 2n 


o ^ t^i 


和 


( b ) P 


Sk - min Sk 《 x S2n = 0 

0^ fc ^2 n 


— 7 = max 

y2n L°^ fe ^ 2n 




p 


max 
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18* 设 iV G [0, oo)，A G (0, oo ). 证明 


1， 如果 N > X , 
1/2，如果 N 二\ 

如果 N < X . 


k 


( An ) 


E 


—An 


lim 


e 




k \ 


fe^niV 


o , 


再证明 


1/n 


如果 N 
如果 N > X . 


A 


k 


e ”， 


( An ) 


E 


lim 


k \ 


一 iVln 令十 N 


e 


k^nN 


提 示：设 « n ) n ^ l 为相互独立的以 A > 0 为均值的泊松随机变量，即有 

P{Cn = e - A A fc / fc !， 验证 

Cl H - 1- Cn 


k 


( An ) 


E 


—An 


(N 


P 


~ C > 


k \ ’ 


n 


k^nN 


然后利用中心极限定理的结论. 

19. 证明， 


n+1 


dx 


x e 


n —> oo * 


2, 


m 


o 


并证明其更为一般的 形式: 




dx = 屯 ( y )， y 彡 0* 


X 


lim 


x e 


T(n + 1) Jq 


再证明 


2 


+ 1 t (n + 1) 


( n +1) 


n 


n+1 


— 6 


n oo . 


1! 


2 ! 


n ! 


2 


提示： 利用第二章第 6 节第 80 题和前一题中的结果 (令 N = X ). 

20 .设 H ，. 为独立同分布的随机变量序列，数学期望 m = 确定，且有 a 2 

m < 

( M n ) n 彡0, 其中队 


oo . 


{ So , &，.-.，&}， 有中心极限定理 成立: 如果0 < M < 


max 


则 


oo , 


— TlfJ/ 

a^fn 


x > = 争 (怎 )， x G M * 


lim P 


21 .设匕，&，..为独立同分布的随机变量序列，有 E 6 = 0, Eg ：= a 2 

5 n = 6 + --* + Cn , n > 1. 又设 {7 V t ， t ^0} 是取值于集合 {1，2,...} 的随机变 
量族，且当 t 


令 


< DO . 


时，有 N t / t 艾 A ， 其中0 < A < 


> DO 


DO. 
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试证明如下的（安斯康博（屯 • AhckomS) 的）关于中心极限定理成立的结 


论：当 t 


时，有 


— > oo 


SN t 


SNt 


^{ x ) 


^( x ) 


p 


p 


彡 X 


(X 




aVNt 

其中， ^( x ) 是标准正态分布的分布函数. 

[ At ], 且为简单起见,设 a = 1.将 S Nt / VN t 表示为 


提示：令 


no 




SN t 


SrtQ + SNt - Stiq 

V^o 


VNt 


时，有 no / N t 4 1, 所以只需证明 


由于 'P{S nQ /y/n^ ^ x} 电 (X )，且当尤 

( S Nt - s no )/^^0. 为此，将概率 P {\ S Nt - S no \ > 6 y /^} 表示为如下的两项 


— ^ DO 


之和: 


P { l ^ W t — S no ! > € y/noj N t G [ ni , 712 ]} + P {|5 iv t — S UQ \ > e^/fiQj Nt ^ [ m , W2 ]}， 


其中 


[ n 0 (l - e 3 )] + 1 


= [ n 0 ( l + e 3 )]. 再利用柯尔莫戈洛夫不等式即可 


ni 


ri2 


断言其趋于 0. 


22* (中心极限定理中的矩的收敛性）设匕，6,…为独立同分布的随机变量序列，有 

E 6=0, 丑技=^<00.令&=6 + ...+匕，几>1. 根据第3节定理3或定 

理1中的 b ) (参阅第2小节)，有 


S n 


d 




( T^/n 


其中， iV 为标准正态分布的随机变量 ( Law ( N ) 

证明，如果对某个 r > 2,有 E |6 | r < oo , 则对任何0 < p 彡 r ， 都有 


P 


S n 


E | Nf . 


E 


— ^ 


(Jy/n 


/ 1 

\ ( Ty/n 


提示： 验证随机变量族 
10节第54题中的断言 b ). 


是一致可积的，再利用第二章第 


, n 


23.设 ($ n ) n >1 为独立同分布的随机变量序列，有^〜 Wl ). 是与 ( e „) n^i 

独立的随机变量,亦有€〜 AT (0,1). 

证明，极限 


6 + …+ € 


lim E 






y/n 


存在，且等于 2 /VE 

提示： 首先验证，随机变量族 { S n / y/E - e , n > 1} 一致可积， 其中& = 

+ - - 1 - Cn . 
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24 .设 P 与 Q 是 （ Q ， 多）上的两个概率测度，且 Q 关于 P 绝对连续 （ Q 《 P ). 

假设关于测度 P ， 序列 Xi , X 2 ,*** 是独立同分布的随机变量序列，有 
E P X i} a 2 = E P (Xi - m ) 2 , 其中 E P 是按照测度 P 计算的均值. 

此时，根据第3节定理3,有中心极限定理成立，即当 


m 


时，有 


n 00 


5^(^ ~ m ) ^ x > ^ ^( x ), 


P 


x G M., 




k / e — y 2 ’ 2 d y - 


其中 Hx )= 


y/2 


我们回过来看测度 Q . 关于测度 Q , 即使在 Q 《 P 的假定下，一般来说， 

A ， X 2 ，…未必还是独立同分布的随机变量序列.但是，根据雷尼的一个结果， 
中心极限定理仍然成立，即当 


时，仍然会有 


n 


J2(Xi - m) < 


Q 


伞 ㈤， aj € R. 


X 


y/n 


a 


i~l 


试证之 • 


提示: 应当证明，如果/ = /(X) 是有界连续函数,则 


E Q /(5 n ) - E P /(iV (0,1)), 


其中，^ = 士 Z (不 — m ), 而 7 V (0, 1) 是服从标准正态分布 ^(0,1) 的随机变 

1 

量.为此，引入拉呆-尼科迪姆导数和随机变量= Ep ( Z >| 力)，其中 
^ k = a ( X u •■- , X fc )， 再把 E Q /(5 n ) 表示为如下 形式： 

Eq/ ( 瓦 )= E P [(D - 认 )/( 义 )] + E P [ 认 /( 又 )]. 

然后，证明 limsup | E P [( D - D fc )/(§ n )]|-0; 并证明当 

rC n 


时，对任何 d 


n — > 00 


都有 


Ep [ D fc /(5 n )]-> E P /(7 V (0,1)). 
25. 设6;,…为独立同分布的随机变量序列，有 


P{6 > 工卜 P{6 


x }, xeR 和 P {|6| > x } 


一 2 


< - 


，X ^ 1. 


=X 


证明，当 


时，有 


n oo 


S n 


P 


电 ㈤ ， x eR y 


彡 X 


Vnln 

其中 Sn = Cl + • . • + Cm Tl ^ l . 


n 
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注： 这个例子表明，即使在找？ = DO 的情况下，独立同分布的随机变量序 
列的部分和&^在适当正则化之后仍有可能渐近于正态分布. 

提示：令 ^ y ^ lnlnn )， 并证明 

W 当 


时，有 EP { enfc ^6}-0. 


n — > 00 


fe=i 


⑻当 


时，有玫 

( iii ) 根据林德伯格定理（定理1)，得知 t U ^ AT (0,1). 

时，有 pfs n / tu 


2 


Inn . 


n — > oo 


nk 


㈣ 当 




n —> oo 


fc=i 


§5. 独立随机变量之和的中心极限定理 II . 非经典条件 


1. 试证明⑼式. 

提示： 利用 


2 


2 


和 


(^) < 


d^nk(x) < 


X 


X 


oo 


oo 


E 


E 


证明， （5) 式左右两端的积分都 有限. 再利用 


t 2 x 2 


itx 


— 电 nfc) 


— itx + 


e 


2 


— GO 


t 2 x 2 


itx 


(-^nfc (^) — 电 nfc ( 尤 )) 


=lim 


— itx + 


e 


2 


( e ttx ~ 1 - itx )[ F nk ( x ) - ^ nk ( x )] dx . 


—it 


2. 试证明关系式 （10) 和 (12). 

3 . 设 iv = ( N t ) t ^ o 是第二章第 9 节第4小节所引人的更新过程（即 


N t = ^2 l ( T n ^ t ), T n 


+ …+ 0"n ， 




.. 是独立同分布的正值随机变量序列).令 

Bax < oo. 证明如下的中心极限 定理： 


其中 


(JL = Ecri < OO, 0 < 


Jl ，^，• 


N t - t\i 


d 


TV (0,1)， 


xAm — 3 % 


其中， N { Q ,1) 是标准正态随机变量（均值为 0, 方差为 1). 
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§6. 无限可分分布和稳定分布 


证明，如果 Cn 么《，并且 《 n 厶％则^ 


d 


1. 


= 7/. 


2. 证明，如果列与外都是无穷可分的特征函数，则外.内也是无穷可分的特征 


函数 • 


3.设 w = Mt ) 为无穷可分的特征函数，对每个 t e R ， 都有％⑴ —^( t ), 其中 
棒) 是某个特征函数.证明，^⑴是无穷可分的. 

提示： 利用如下 事实： 如果 Mt ) 是无穷可分的，则存在独立同分布的随机 
变量6，…，匕，使得& = 6 +…+ fn 的特征函数就是 ^ n ( t ), 并 且&三 了， 
其中 r 是无穷可分的. 

证明，无穷可分分布的特征函数不会等于 0. (参阅第12题 .） 

提示： 固然，题中结论可以由柯尔莫戈洛夫-莱维-辛钦公式直接推出，但是 
我们建议读者不要利用该公式，而按照如下思路证 明之: 如果^是无穷可分的 
特征函数，则对于每个71 > 1 ,存在特征函数 ifnit ), 使得 W ( t ) = ( ifn ( t ) r ， 由此 

即可断言仏 ⑴= lim ipn ( t ) 恒等于1,其中 1 p n ( t ) — \ if n { t )\ 2 . 

Tl—OO 

5. 证明，伽玛分布是无穷可分分布，但不是稳定律. 

提示： 可以模仿下面的 证明： 服从泊松分布的6即 P{C =衫 

无穷可分的（参阅第二章第8节第3题).但是它却不是稳定的.事实上，如果 
6+6 - < + 6,其中 a > 0, h IR ， 而6与 C2 是€的相互独立的复制.那么只 
能由此得到 a = l , 6 = 0,从而就应当有而这是不可能的. 

6. 证明，对于 a 稳定的随机变量 t 只要 r < a , 就都有 E\^\ r < 

提示：由关于稳定分布的随机变量$的特征函数的莱维-辛钦表达式 

可以推出，存在 J > 0,使得只要 * G (0, J ) 与 a < 2 5 就有 Re ^)^ l - c \ t \ a , 其 
中 c > 0. 因此,根据第3节引理3,对 a > 0,有 


4 




1 A !， 是 


e 




oo * 


cK 


p ICI^ 




a , 




a +1 


a 


此即表明 P{|$| r > n } 彡患 n - 如果 r < a , 那么就有 


E|C| r <l + E P _X 


< oo* 


7. 证明，如果 （ 是参数为 0 < a < 1 的稳定分布的随机变量，则其特征函数 f ⑷ 
在 t = 0处不可微. 

8. 试直接证明，如果 d 彡0, 0 < a < 2,则函数 e - 啡是特征 函数; 而当 d > 0, a > 
2时，该函数不是特征函数. 
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9 •设 ( b n ) n>l 为数列，对某6 > 0和一切|*| < 5,都有 lime * 存在.证明 h ^\ b n \ 

n n 


< 


提示： 最好按照如下思路进行 反证： 假设 hm \ b n \ = + oo . 于是存在子列，使 
得 lim |6 nfc | = oo . 为方便起见，不妨设 lim |6 n | = 

fc Tt 

t e {-5, S ). 于是对任何 [ a ， 到 G (-5, 句，都有 


iS h ( t ) = lim e ltbn ? 其中 


oo . 


n 


S 


S 


p){ty tbn dt 


0]( t ) h ( t)dt = lim 

由此并利用恰当集合原理(第二章第2节)，即可推出，对任何 A e 涿 ([ U ]), 都 
有 f! s I A (t)h(t)dt^0. 从而,对任何 K [-(M], 都有 九 ⑷= 0. 另一方面，由于 
| e ^| = 1,从而对一切 t e [—} ， 都有⑷ | 二 1 ， 导致矛盾，所以 I ^|6 n | 

10. 证明，二项分布、均匀分布和 三角形分布都 不是无穷可分分布.（将密度函数为 

f ( x ) = (1 - \ x \) I { _ hl ) ( x ) 的分布称为区间（-1， 1) 上的三角形分布 •） 

再证明进一步的命题:任何有限支撑的非退化分布都不是无穷可分分布. 


0 . 




一 5 


-5 


< OO, 


* • * F ㈨ （n 次)， 

沪= R ⑻]' 其中 F ㈨ 是某个分布函数，而 p ⑹是它的特征函数， n ^ l . 证明， 
可以找到一个（“足够丰富的”）概率空间（0,多, P )， 在它上面能够定义随机变 
量了与（城) Wn，n > 1 (其中 r 服从分布 F , 而说，…，埔独立同分布，均服 
从分布 F (-)) ,使得 r 呈说+…+成 ， n > 1. (亦可参阅《概率》第一卷 P 373 中 


* * 


的注 .) 


12. 试举出一个随机变量的例子，它不服从无穷可分分布，而它的特征函数也不会 

等于0 (亦可参阅第4题). 

13. 试证明 


( a ) 特征函数# = ^⑷是无穷可分的特征函数，当且仅当，对任何 n > 1， 
次方根 ^ n ( t ) = ei — ⑴都是特征函数（其中 ki 是对数的主值). 

( b ) 有限个无穷可分的特征函数的乘积是无穷可分的特征函数. 

14. 利用上题结论和函数 - 


n 


ip ( t ) = exp { itf 3 + X ( e tta - 1)}, A > 0, ueR , P £R 
是（泊松型的）无穷可分特征函数的事实,证明，如下的（费内提) 函数 


k 


it /3 + ^ Xj ( e 1 


tu^i 




1) 


3 


exp 




3= 


与 


( f ( t ) = exp < it /3 + / (e ttu - l ) dG ( u ) 


— OO 


L 
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都是无穷可分的特征函数，其中 G = G ( u ) 是有界上升函数. 

=^) 是某个具有有限二阶矩的分布的特征函数.证明，此类函数是无穷可 
分分布的特征函数，当且仅当， f ⑷具有 柯尔莫戈洛夫表达式 


15. 




ip ( t ) = exp ij ) ( t ) 


而 


= itb + I ( e ltu — 1 — itu )— dG ( u ), 


其中 beR , G = G { u ) 是非降左连续函数，有 G (- oo ) = 0, G ( oo ) < oo . (试比 
较上题中的（费内提）函数 .） 

16. 证明，如果 p ( t ) 是无穷可分分布的特征函数，则对任何 A 彡0,函数 ^( t ) 都是 

特征函数. 

17. (续柯尔莫戈洛夫-莱维-辛钦公式）设 h 是对 rr € 1 R 有定义的截断函数 

(在 rc = 0的邻域中满足条件 / i ( rr ) = o :， 具有紧支撑的有界连续函数).证明， 

( a ) 柯尔莫戈洛夫-莱维-辛钦公式（ 2 )可以表示成如下 形式： 




ip { t ) = exp i ) h ( t) y 


而 


t 2 c 


{e itx - 1 - ith{x))F(dx) 


♦h(t) = itb 一 


2 


其中 6 = 6(/0 G E , c > 0, F ( dr ) 是（麗，潔 ( R )) 上的测度，有 F ({0}) = 0和 

j{x 2 A l)dF{x) < 

( b ) 对于不同的截断函数和 V ，系数 6(/0 与 b(h f ) 满足关系式 


oa 


b(h f ) = b(h)+ / (h f (x) - h{x))F(dx). 


( c ) 如果 p ⑴所对应的分布具有有限的二阶矩，则 p ^ Fidx ) 
18. 证明，密度函数为 


< oo _ 


— 1/(2工) 


f ( x ) = 


， x > 0 


e 


V2ttx 3 


I , /3 = 0, 0 = -1的稳定分布（参阅 （10) 式). 

19. 称随机变量“服从参数为 X({x m }) > 0的广 义泊松分布， 如果 

X k ({x m }) 


的分布是参数为 


a = 


e 


= 灸工 m } = 


， fe = 0，1，2,… ’ 


k \ 


其中 x m eR \{0}. 
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设6, …，^ 是相互独立的所述类型的随机变量.以 A = X { dx ) 表示 E \{0} 
中的以 n 点集合 { 

A ({ x m }). 令 r n = 6 +…+匕.随机变量的分布称为复 合泊松分布. 

复合泊松分布随机变量的特征函数 cp Tn ( t ) 具有如下的表达式： 


1，…， n } 为支撑的测度,它在点处的测度值为 


Xm. % 771 — 


( e itx - l ) X ( dx ) > . 


^T n ( t ) = exp 


R\{0} 


(由此表达式看出，复合泊松分布是无穷可分的，而它与柯尔莫戈洛夫-莱维-辛 
钦公式 （2) 的结合展示出了该种分布在整个无穷可分分布类中所起的“结构” 
上的关键作用.这种作用就是：每一个无穷可分分布都是某个复合泊松分布序 
列的（弱）极限 

20. 在概率空间⑴，多， P ) 上考察这样的事件组 序列： 乂⑻= ( A nkr l ^ k ^ n ), n ^ 

1，其中,对每个 n ， 事件4 


., A nn 都相互独立.假设 


nl， … 


P(-^nfc) = 0 


lim max 

i-^OO l^fe^n 


和 


E p (d 


A , 其中 A >0. 


lim 


k=l 


试证明如下的命题 （稀有事件定 律)： 随机变量序列 E I ( A nk ) 依分 

布收敛到某个服从参数为 A > 0的泊松分布的随机变量 

21. 设 X 与 F 为相互独立的随机变量,均服从参数为 A > 0的泊松分布.试求随机 

变量 X - F (有时也称其 为双向泊松分 布随机变量）的特征函数证明，随 
机变量 X - F 的分布为复合泊松分布（参阅第19题，亦可参阅第二章第8节 

第3题). 


fc —- 1 


22•设= (^， l ^ k ^ n ), n ^ l 是随机变量组序列，其中，对每个 n ， 随机变 

量^， • ■- ， Cnn 都相互独立.设外= ^nk ( t ) 是随机变量的特征函数.证 

明，如下二条件相互 等价： 

( a ) lim 

n—o 

着小条件或称极限无穷小条 件). 

( b ) 对每个 t e R ， 都有 lim 


P{\Cnk\ > e } = 0 (随机变量组序列 （ e( n )，n > 1) 的 渐近无 


max 

1 fc 7X 


沪 nfcOOl = 0- 

23. 我们说，随机变量 C 服从（参数为 P > 0, 6>0的连续的） 帕雷托 ( Pareto ) 分布， 

如果它具有如下形式的密度函数 f fi ， b ( x ) •- 


max 1 — 

po 


pb p 


fpA x ) 


I(x > b ). 
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证明，该分布是无穷可分的，而随机变量 logf fli 从参数为 p 的指数分布. 

注：离散型的帕雷托 ( Pareto ) 分布见第二章第8节第85题. 

24. 我们说，在（0, 00) 中取值的随机变量 e 服从参数为 （ M ， P ) 的 逻辑斯谛分布 

(logistic distribution ) ,其中蛘 € H ， p >0, 如果 

P {“ x } 

证明，该分布是无穷可分的. 




无 > ()• 


1 + e_( x 一卩 ) 


§7. 弱收敛的“可度置性” 

1. 证明，在空间五= M 中，概率分布 P 与 P 之间的莱维-普罗霍洛夫距离 L(P, P ) 
不小于与 p 和戶相对应的分布函数 F 与歹之间的莱维距离 L ( F , 巧(参阅第 
1节第4题).并举出成立严格不等号的例子. 

提示： 为证明 L { F , F ) ^ L(P, P), 只需证明 

■ 

L ( F , F ) = inf{e > 0 : P ( D ) < P ( D £ ) + £ 和 P ( D ) < P ( D £ ) + 

对一切形如 (- oo , x ] 的集合 D , x e E }, 


€ 


而 


L ( P S P ) = inf{e > 0 : P { D ) ^ P ( D £ ) + e 和 P < P ( D £ ) + 

对一切闭集 D g R }. 

为举出成立严格不等号的例子,可以考察测度 P =如和 P = 其中 

心是集中在点 a 处的单点概率测度，即 


e 


1， 如果 aeA , 
0,如果 a ^ A . 


S a ( A ) 


(在本例中，有 L ( F , F ) = L { P , P ) = 1,试证之 •) 


2. 证明， （19) 式定义了空间中的一个距离. 

提示: 为证性质 || P - P || 

简 单)， 请考虑对于闭集4和 


0 ^ P = P (对距离的其他性质的验证都很 
0通过 （14) 式所定义的函数 f %( x ). 当 e 丄0 




BL 


€ > 


时，有 


r A ( x ) P ( dx ) ^ P ( A ) 和 J f %( x ) P ( dx ) P ( A) y 

所以对任何 闭集隼 都有 P ( A ) = P ( A ). 再令 ^ r ={ A € m { E ) : P ( A )^ P ( A )}, 
(并利用“恰当集合 原理” 和 “ tt-A 系”的性质，参阅第二章第2节，）即可断言 
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3. 证明不等式 (20), (21) 和 (22). 

4. 设 F = F { x ) 与 G = G { x ), xem 是两个分布函数，巧与 Q c 分别是它们与直 
mx + y = c 的交点.证明， F 与 G 的莱维距离（参阅第1节第4题）等于 


PcQ 


L ( F , G ) = sup 


V2 5 


其中 P ~ Q C 是连接点巧与 Q c 的线段的长度. 

5. 证明，赋予莱维距离的全体分布函数的集合是一个波利希 (Polish) 空间 (完备 
可分的距离空间). 

6. 设 K { F ， G ) 是分布函数 F 与 G 之间的 柯尔莫戈洛夫距离： 




ir ( F ? G ?)= sup | F ( a :)- G ( a :)|, 


而 L ( F , G ) 是它们之间的莱维距离.证明 


L { F , G ) ^ K ( F ， G ) 


而若 G 绝对连续，则还有 


K { F , G ) ^ ( l + sup | G , ( rr )|) L ( F J G ). 


7.设=与 X 是定义在同一个概率空间上 f 两个随机变量，分别具有分布函数 F 
与反证明，它们之间的莱维距离 L ( F , F ) 满足关系式 


L ( F , F ) + P{|X - X | > d }, V d > 0, 


和 


L(F 、 F) ^ (c+ l)e^ (E|X — X\ c )^, Vc> 1. 

8. 利用刚才的第 6 题与第 7 题的结果，证明，如果叉与 X 是定义在同一个概率 
空间上的两个随机变量，分别具有分布函数 F 与釆而 电 ( x ) 是标准正态分布 
7 V (0,1) 的分布函数, a > 0,则有 


© 


sup F ( x ) — $ 


©I 


+ 2(E|X~X| 2 ) 1 / 2 • 


sup F ( x ) —电 


彡 （ 1 + 


v2rca 2 


§8. 关于测度的弱收敛与随机元的几乎处处收敛之间的联系 

1. 证明,在可分的距离空间情况下,对于任何定义在某个概率空间…，多， P ) 上的 
随机元叉 ㈣ 与 FM ， 实值函数 p ( X ( u ;), Y { uj )) 都是随机变量. 
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提 示:设 {々，勿, ...} 是 E 中的可数稠密子集.证明，对任何 a > 0,都有 

{uj : p { X { uj ) ) F ( a ;)) < a } 


: Zm ) 〈一卜 Pi 


: p(y(^), ^ m ) < 


d —— "~ 


由此并根据第二章第 4 节引理1，即可断言 p ( X ( cv ), y ( a ;)) 是罗可测的. 

2. 证明，由 （2) 式所定义的函数 d P ( X , Y ) 是取值于 E 的随机元空间中的一个距 


离. 


提示： 根据上一题，集合 { p ( X , Y ) < e } 是可测的，这就表明，量 d P ( X , F ) 
已经适当地定义下来.再直接验证距离的三条性质. 

3. 证明蕴涵关系式 （5). 

4. 证明，集合 A h = {x e E : h ( x ) 在点 a ； 处不 p 连续 } € #. 

提 示：设 { a 1} a 2 , … } 是五中的可数稠密子集.为证 e 必只需证明如 
下表达式的正 确性： 


u n lk ， 


△ 


rriyk j 


n=l m=l fc=l 


其中 


B 1/ m ( a k ), 如果存在 y，ze B 1/ m { a k ), 使得 |%) — h ( z )\ > 1/ n , 

其佘情况. 




0 ， 


易知 A n ,m,k 属于 

设随机变量对(“)与 ( f ， 兩依分布重合（即 （€， W ▲名机并且刚 
证明， ERIr /) 兰 E (，|^- 

6 八与 7?是(在某个足够丰富的概率空间中给出的）两个取值于博雷尔空 间 ㈤ ， /) 
的随机元（参阅第二章第 7 节定义 9). 证明，可以找到某个定义在丑 X [0, 1] 上 
的取值于丑的可测函数/二 /(A y ) 和某个服从区间[0，1]上的均勻分布的随 
机变量《，使得如下关系式 成立： 


5. 


< OO- 


i = /(% a ). 

7 .设 6,6,** ■ 为独立同分布随机变量序列，有 E 6 = 0, EC ? 

E 6, n ^ 1. 试证明如下结果（称为 斯科罗霍德勘 入)： 存在某个概率空间 

( Q , W , P ), 在其上面定义了一个布朗运动云= { B t ) t ^ 和一列停时 f 二 ( r k ) k ^ 
有0 = ? b 彡方彡…，使得 


令= 


< oo . 


fc=l 


d 


并且 E ( r n - r n _ i ) = E ^, n ^ l . (符号 = 意味着同分布 .) 
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8. 设 F = Fh ) 是 M 上的分布函数 • 定义其 反函数 < 1, 为: 

inf {x : F(x) > u}, 如果 u < 1, 

oo , 如果 u = 1. 


广 1 ⑻ = 


试证明 


(a) {x : F(x) > u} C {a: : F _1 (u) ^ x} C {x : F(x) ^ a}. 

(b) F(F~ l (u))^ Ul F~\F{x))^x. 

(c) 若 F = F(x) 为连续函数，则有 F-^u) =M{x: F(x) ^ u} 7 F- 1 ⑻ 

{x : F(x) — u}, F(F~ 1 (u )) 彡 u 和 {rc : F(x) > u} = {x : F _1 (u) < x}. 

(d) inf {x : F(a:) > u} = sup{x : F(a:) < u}. 

注：在数理统计中，函数 Q{u) = F-^u ) 称为分 位点函数' 

9 • 设 F 二 F(x) 是分布函数，而 F- 1 = 广 1 ⑻是它的反函数 . 

⑷证明，如果 U 是服从区间 [0, 1] 上的均匀分布的随机变量,则随机变量 
F-^U) 的分布就是 F = F{x ), 亦即 




max 


( b ) 证明，如果随机变量 X 的分布函数 F = F(x) 连续，则随机变量 F{X) 
具有区间[0, 1] 上的均匀分布. 

注：设 C(u) = P{U ^ u} 是区间 [0, 1] 上均匀分布的随机变量 [/ 的分布函 
数，则有 C(F(x)) = F(x). 试比较第12题的结果. 

10.设 F(x,y) 是随机变量对 （ C ， r ?) 的分布函数，而 F^x) = P {^ ^ x }, F 2 (y ) = 

P { r / ^ y } 分别为变量 .C 与 U 的分布函数.证明如下的弗雷歇-霍夫丁不 等式: 
对任何 x , 2/ G E , 都有 


( 朽⑻ +F 2 (y) — 1 ， 0) ^ F(x, y) ^ mill (Fi(x), F 2 {y)). 


max 


11 •设 （17, F ) 是取值于 [0, l ] 2 的随机向量，分布函数为 


C(u, V、= P{t/ V ^ v} } 


并且17与 V 都服从区间[0, 1] 上的均勾分布.又设 i ^ a :) 与 F 2 ( y ) 是两个连续 
的分布函数， x , yem . 

证明，函数 


F (^^y) = C ( i ^( x )， F 2 (y)) 1 x , y 6 E , 


(*) 


①原书中有如下的一 段话： “ 我们指出，《概率》第一卷第三章第 8 节关于分位点函数的定义式 
⑷ 中的 F(x) ^ u 应当是 F{x) > (5) 式则应当换为本题中的结论 （ a); 参阅本书末尾关于《概 
率》第一、二卷的勘误表在本次出版的中译本中已经按照勘误表作了更正 


译者注 . 


— 
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是二元分布函数,并且它的两个边缘分布为和 F 2 {y). 

注： 人们曾经对这样的问题表现出极大的兴趣：如何根据给定的具有边缘 
分布巧⑷和 F 2 (y) 的二元分布函数 F(x,y) (x,y eR) 来构造满足性质 （*) 的 
函数 C{u ， v)l 现在的这种做法，即通过某两个取值于区间[0, 1] 的随机变量 U 
与 V 的分布函数 P{U ^ u , V ^ v } 来得到具有所述性质的函数的办法,是斯 
克利亚尔 （ A. Skiar) 于 1959 年给出的，称为系耦 (copula) ,在他的著作 （参 考文 
献 [110]) 中,证明了这种函数的存在性（和唯一性).（作为例子，可参阅下一题 .) 

12. 设为二元分布函数，由下式所 定义： 


F(x,y) = max (a: -h 2 / - 1, 0), 


其中 0 < 工 ， y < 1. 

( a ) 证明，它的两个边缘分布 iMz ) 与 F 2 (y) 都是区间[0, 1] 上的均匀分布. 

( b ) 证明，如果系耦如下式所 定义： 


C ( u , v ) 


1, 0), 0 ^ u, v ^ 1, 


(u 4 - 


max 


v — 


则有 


F(x,y) = C(F 1 (x) ) F 2 (y)). 


注：试比较第 9 题的结论. 

13. 设《与6,6,…为随机变量，有 Law ( Cn )-^ Law ⑹.假设 《 n 彡 0. 证明 


< limE . 


提示:利用现在第8节中的定理1和第二章第6节中的定理2 (法图引 理). 


§9. 概率测度之间的变差距离.角谷-海林格距离和海林格积分.对测度 

的绝对连续性和奇异性的应用 


1. 利用引理2的符号，令 


P f \ P 二 E Q (z hi ) 


其中 z Az = min ( z , T ). 证明 


P - P \\ =2(1-PAP). 


(因而就有 ^ r ( P , P )- PAP , 关于 ^ r ( P , P ) 的定义可参阅《概率》第一卷第三 
章第9节中的⑷式 .） 

提示：利用表达式 a Ab — I (a + 6 — |a — b \). 
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2.设仏 ， n > 1,是（艮 ^( E )) 上的一列概率测度，分别具有（相对于勒贝格测 
度的）密度函数 p ( x ), p n ( x ), n ^ L 假设按勒贝格测度对几乎所有的: r ， 都有 

Pn(X) -+ p ( x ). 证明 


|p ⑻ -p n (x)\dx o , 


\ P - Pn \\ 


n —> oo. 




提示: 按照如下方式表示所考察的积 分式: 


\p(x) -p n {x)\dx 彡 


\p(x) - p n ( x)\dx 


{1x1 彡 ci} 


p ( x)dx + 


Pn(x)dx, 


{|x>a} 


J{|x|>a} 

其中 a > o 应当如此选取，使得对于任意给定的 e > 0,有 J ； 
然后利用法图引理，得知 


p(x)dx > 1—e. 




p n (x)dx ^ 1 


lim 


— £• 




n 


3. 设 P 与 P 是两个概率测度.将利 P 反 P 的库 尔贝克 ( Kullback ) 信息 K(P, P) 
定义为 


rjP ， 

Elni ， 如果 

dP 

oo , 其余 场合 . 


K(P, P)= 


证明 


K(P, P) ^ -21n(l - p 2 (P 5 P)) ^ 2p 2 (P, P), 

其中 〆 P ，戶）是测度 P 与 P 之间的角谷-海林格 ( Kakutani - Helinger ) 距离. 

提示 : 第二个不等号是不等式 - ln(l -x)^x 的自然推论，0 < 1.而为 

证第一个不等号，需首先确认 


Z 


21n(l -p 2 (P 5 P)) = -2lnE P \ 




z 


然后利用延森 (Jensen) 不等式，证明 


Z 


2lnE P \ - ^ K(P, P). 




Z 


4. 试证明 （11), ( I 2 )式. 

5. 试证明不等式 (24). 

提示: 如果 Q = + 戶)， 
而不等式 （24) 具有形式 


dP 


dP 


1，则有 


，令 






.. *y 

dQ， Z ~ dQ 


y — Z 一 


— Z = 


y 


^Jc a (l-E Q f(y)) 


2(l + E Q f(y))^2E Q \y\^ 


§9. 概率测度之间的变差距离.角谷-海林格距离和海林格积分.…… 
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其中 /( y ) = (1 + y) a {l - y ) l ^ a , y € [-1, 1]. 再在区间（—1， 1) 上面分析 f ( y ) 
与 /"( y ), 推导出: 

( a ) / = f ( y ) 是区间 [-1, 1] 中的上凸函数，且有/⑼彡1 - 

( b ) f { y ) < 1 + /' ⑼2/ — c a y 2 , y € [-1, 1], 其中= a(l — a )/4. 

然后由 （ a ) 推出所要证明的第一个不等号，由 （ b ) 推出第二个不等号. 

6•设 P ， 戶, Q 是 （ IR , 涿 ( IR )) 上的概率测度 , P * Q 与戶 * Q 是它们的卷积（参阅第 
二章第8节第4小节).证明 


||P*Q-P*Q||^||P~P||. 


提示： 利用引理 1. 

7. 试证明例2中的性质 （30). 

提示： 通过直接计算，可得 


H 7 ： ; P, P 


k — 


2 


接下来应当利用定理2和定理 3. 

8•设$与 r ? 是⑴，多， P ) 上的取值于 （五， #) 的随机元.证明 


|P{C eA}~ P{T} e ^}| ^ P(e ^r?), 


提 tF : 利用 


l^(C ^ ^4) — /( t ? G ^4)| = |/(C € ^4) — /(?? G A )\ I (^ ^ r }). 


9. 如下的公式 


1 — a 


H { a - P , P ) = / ( dP ) a ( dP ) 

Jn 

(参阅 （20) 式）定义了测度 P 与戶之间的 a 阶 海林格 积分.在概率-统计试验 
的许多问题中，考察按如下方式定义的所谓海林格变换 H {^ £) 似乎更加有益. 

令忒= ㈨ ，多； P 0 , P u …， P k ) 是一个概率-统计试验 5 意即一个可测空间 
{ n , 连同在它上面所给出的概率测度凡， Pi , -• , p fc . 

用符号的形式， 试验# 的海林格变换 H { a \ S ) 的定义是： 




H(a; # ) - / (dP 0 ) ao (^i) ai *- (dPk) ak 


w 


a 


( a 0 , ai , - * , a k ) 属于单形 


其中 


a 


k 


• ， a fc ) : ai ^ 0, y^ ai = l 


= («o? oti, * * 


Efc+i = 


a 


i=0 
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如同= 1的情形，要求对 （*) 中的积分赋予意义（可利用强势测度的概 
念),并且证明与引理3相类似的结论. 

10.设（仏，潘 ( A )) 是可测空间，其中 A 是单形 


k 


(xi, … ，： r fc ) : Xi ^ 0, Ylxi = l 


Sfc = 


X 


i—1 


而 ^( E fc ) 是由该单形的子集所形成的博雷尔类. 

设 M = /1(心）是 （ Sfc ，^( E fc )) 上的测度，有 / i ( E fc ) < oo 和 


Xifi(dx) = 1 ， i = … ， k. 


Sfe 


(在概率-统计试验中，将具有这种性质的测度 M 称为 标准的 .） 

在数学分析中，测度 M 的海林格变换 H ( a ; fj ) 如下式所定义:对一切 aeE 


k 


令 


x ? 1 … x^ k n{dx). 


M(a; = 


s 


k 


试证明如下各 命题： 

( a ) 如果/ zi 与/ <* 2 是两个标准测度，使得对一'切 oc € Sjt , 都有 H ( a ; / m ) = 
H ( a ; p 2 ), 则有 Mi = M 2- 

( b ) 标准测度序列 Mn 弱收敛到标准测度 M ， 当且仅当对一切 a e Sfc , 都有 

H(a; Mn) — H(a; ^), 

设忒 =( n ， ，； P 0 , ，…，巧）是一个概率-统计试验， Q 是一个可以控制 

测度 Po , Pi , , Pit 的强势测度，而 


n — > oo . 


dPi 


fi 


i = 0, 1，.*•，/!：• 


dQ J 


在 （ Sfc , 激 ( Sfc )) 上定义概率测度 


m ㈤ = QW ： (/oM ， • •. ， e Ae ^(E fc+ i). 


证明，测度 M 是标准的，并且 


H ( a \ = H ( a ; fj ). 


11. 设⑴,多；凡， Pu …， Pk ) 是一个概率-统计试验， Pb 是可以控制测度 

P u …， Pk 的强势测度.令 


dPi 


i = 1， • * * , k. 


= 


dP 0 J 
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在概率论中，将按照下式所定义的 0 eA k 的函数称为试验#的梅林 ( Mellin ) 


变换: 


JJ 1 


(h 


Po (( Lj ) (= Eo (^--*^ fe )), 


M ( 戌⑺ 


• z 


« - * 


k 


其中 


k 


/? = (a ，…， 你） ： o 彡汰 < 1， ^2 Pi 

i~l 

数学分析中，对测度 p 的梅林变换 M (/3; u ) 略有 不同: 设 y 是 ( M ^, m ( ml ) 
上的一个概率测度，其中 


△fe = 


< 1 ^ 


股 t = {$ = ( 尤 1 ， ■ • • ， Tfc) : 无 i >0，$ = 1 ， •…， &}， 


使得 


Xii/{dx) ^ 1 * 




( M ^ 上的这样的测度 p 也称为 标准的 .） 此时， 根据 定义,令 


… 〜 ( 也)， 


01 


M (/3; u ) 








其中 /3 = ( ft , • ■ ■ , /3 fc ) G A fc . 

试 证明， 

( a ) 若 a 与 w 是两个标准概率测度,使得对一切0 都有 M (/3; ^ i ) 

M ( I 3; u 2 ), 则有 

( b ) 标准 测度％ 的序列（〜）弱收敛到标准测度〃，当且仅当对一切0 e A *， 
都有 M (/3; MD ， 

( c ) M {(3; #) = M (/3; u ). 

12. 证明，如果 a = ( a 0 


V\ = 1^2- 




n —> oo * 


.■ ， afc ) € Sfc + i ， 并且 a 。> 0,则有 


ai 5 - 


H ( a ; S ) = M (汍， ) 


其中 0 = (卢1 ，…， AO = («1, * * * , Oik )- 

再证明，如果 
Inzi , i — 1^^ } k , 则有 


(otQj ai , …， o ： fc ) € Sfc + i ， 其中 Q：o > 0, 并且 A 


a 


k 


I > 心 ， 


H ( a ; #) = E 0 exp 


i=l 


亦即海林格变换 H ( a ; 重合于向量 （ L l 5 …， Lfc ) 关于测度 P 0 的拉普拉斯变 


换 * 
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13* 设 i 5 = ( j ) a b ) 为随机矩阵（见第一章第12节)， 1 ( a，b ( N < oo . 量 


N 


sup 


D ( P ) 


-Pjk 






2 


h 3 


k=l 


称为矩 阵 P 的多 布鲁申 ( Dobrushin ) 遍历 系数， 

试证明， 

( a ) D ( P ) = sup ||(||. || 为变差距离). 


I，J 


N 


( b ) D ( P ) = 1 - inf X ) (Ptfc A Pjk ) Q - 

u k=i 

( c ) 如果 P 与 Q 是 爾个随 机矩阵，贝 ij 


D ( PQ ) ^ D ( P ) D ( Q ). 


Wuh , …，口 N ) 为两个分布，贝 !I 


⑷ 如 果 ( Mi ， M 2 3 …，_) 与 


U 


=: 


\\fiP n -uP n \\^\\^-u\\(D(p)r. 


14. 设 P 与 Q 分别是随机变量$与7]的分布，则有如下的卡 泊林格不等式 ( Kapling - 

inequality ) 成立： 




2 


(试比较第8题中的断言 .） 特别地，如果随机变量 C 与 U 分别具有密度函数 P(aO 
与9⑻，则 


P{C = 7j} ^ 1- ~ 


|p(x) — g(x)|da:. 


2 


E 


试举例说明，式中的等号可以成立. 

15. 设 X = (X n ) n>0 与 F = (Y n )n^0 是定义在某个概率空间（0,多， P ) 上的两个 

随机变量序列.设 t 是随机时,使得对一切 n > t(lu), 都有 X ti (uj) = Y n ( u;)(m 
机时 t 称为卡 泊林格时). 证明如下的卡泊林格不等式 成立： 


7 ；\\ p n - Qn \\ 彡 P { T > n }， 


2 


其中 A 与 Qn 分别是随机变量 Xu 与 K 的概率分布. 

16 . 设 f = f(x) 与沒 = 9 ⑻是 （1 R ， 满 ( M )) 上的两个分布的密度函数.证明， 

(a) j \f{x) - g(x)\dx = 2 j (f(x) - g{x)) + dx = 2 [ (g{x) - f(x)) + dx. 

(J Vf ( x ) 9 (^)dxj <2 j 


(b) 


min (/( x )， g(x))dx. 


©原书中的求和号上限为 


译者注. 


OO 
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(c) j 1/ ⑻—咖 )1 咖彡 9) ’ 其中 KU, g) = J /⑻ 血 是 

库尔贝克信息（参阅第3题)，并假定具有密度/的分布巧关于具有¥!度 5 的 
分布巧绝对连续. 

( d ) J min (f(x), g{x))dx ^ 

IT . 设随机向量 , X k ) 具有如下集合上的均勻 分布： 


K (/, 9 ) 


k 


=( 冗 1，…， x k ), Xi ^ o ? < i 卜 


Tk = 


X 


i=l 


证明，向量 X 的概率分布密度 / ⑻为 

f ( x ) = k \, 

18. 设 X 与 F 为随机变量，有 EX 2 < oo , EY 2 < 

EX )( Y ~ BY ) 是它们的协方差.分别以 F ( x , y) y 朽⑷和 F 2 { y ) 表示随机向量 
( X , Y ) 以及随机变量 X 与 F 的分布函数.试证明如下 的霍夫丁公式 •. 

j j (F{x ， y) 


eT k . 


X 


而 cov ( X , F ) = E (X - 


OO, 


cov ( X , Y )- 


- F 1 ( x ) F 2 ( y )) dxdy . 


§10. 概率测度的临近性和完全渐近可区分性 


彡1，其中,与巧分别为具有 
参数 K ，1) 和闲， 1) 的高斯测度.试求分别使得 ( P n )< ( P n ) 与（戶 n ) A ( P n ) 
成立的关于 «) 和间 J ) 的条件. 

提示: 先通过直接计算，证明 


1 •设 pn = pn 


P n = P 1 n x ^ xP 7 


n 


X 


n 


_ _ 


ri ^ 


n 


a(l — a ) 


EK - 5]J) 2 } ， 


H { a ; F n , P n ) = exp 




2 




然后利用 （11) 与 （12) 中的断言. 

2. ^ = Pr x ... x F ^, P ^ = Pf x -.- xP ^, 1，其中，与巧 1 为 （ M ， 潢 ( M )) 

上的概率测度，有 P ^{ dx ) = /_⑻也， P fc -( dx ) = I [a 
证明， H ( a ; P ^) = l - a n m 


](x)dx y 0 ^ a n ^ 1. 


1 +a 


( P n )< ( P n ) 


( P n ) <3 ( P n ) ^ lim na n = 0, 

( P n ) A ( P n ) 分 HE na n 




n 


— OO. 


n 


3 •设叽多， (^ n ) n >0) 是可测空间中的筛子，亦即在叽多）中赋予了一个 a - 代 
数流即有 #0 C C . . . C 再设 ^ = a (\ J ^ n \ 假定 P 与戶 


n 
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是⑼多）中的两个概率测度，并且 Pn = P \^ n , 即它们在多 n 上 
的局限.证明 3 


(P n ) < (P n ) 分 
(Pn)<>(Pn) jP 〜 jP ， 

(P n )A(P n ) ^ 戶丄 P. 


4 •设 （ fl ， 多， P ) 为概率空间，其中 Q = {-1, 1}°° 为二元制无限序列 o ? = 

-•■ ) 的集合(序列中的每一项只有1和 -1 两种情形);对于任何叫== 

) =( 町， …， a n )} = 2 ~ n . 再设 e n (uj) = 

^ 1. (关于测度 P ， 序列 e = (^， e 2 , • •.） 是相互独立的伯努利随机变量 
序列，有 P { e n = 1} = P{en = - l }- i ) 

构造序列 S = ( S n ) n >0 如下 •• So - 1, 5 n = ^_!(1 + Pn ), 其中 P 

>0, Mn > 1( 在这些条件下，有心 > 0;在金融数学中， S n 
表示时刻 n 时的资产 总额; 参阅第七章第11节 .） 

令 P n = P | 馬 M 其中多 n = cr ( eu …， Q ). 在 （ a 多）中引入新的概率测度 

… 仍然为相互独立的随机变量序列，但是却有 


C^2 


1，… 7 n , 则有 P{oj : ( o；i 


a; 


» « * 


n 




n 




a 


n 


p , 使得 


^1 > ^2 ^ 


P { e n = 1} = 7:(1 + b n ) y P { e n = -1} = -(1 - b n ), 


2 


2 


其中 ^ l = -fij 

( a ) 证明，序列 S 二 ( S n ) n >0 关于测度 P 是鞅（参阅第一章第 11 节和第七 
章第1节). 

( b ) 令 P 


a 


n* 


P ^ n , 证明 


n 


n 


'(l + 6 fc ) tt + ( l -6 fc ) tt ' 


H ( a ; P n , P n ) - Y [ 


k=l 


并利用（第 10 节中的）定理1,由此导出 


(p-x(p-) ^ J2 b l 


< OO. 


fc=l 


2 


(根据“大”金融市场理论,前一结论表明，条件 e 

的充分必要 条件; 更详细的介绍见专著 [1301 第六章第3节 .) 

5. 与上一题不同，现在令 S n = 

0, ( e u e 2 , …) 为独立同分布的正态 AT (0, 1) 随机变量序列. 

令^ n = crf ^，. •. ， e n )， P n = PH，n 彡 1. 


是无渐近套汇 


Bk 


< OO 




k=l 


奴 lH - h 凡 n 


> 1， St ) = 1，其中 Zlfc = 




e 


， n 
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⑷证明，关于这样的测度尹，其中 P|^ n = P -, 而#« = z n dP n , 并且 


{.+?) 


+ 7： 


= exp 


2 


序列 ( S n ) n >0 是一个鞅（参阅第七章第11节). 

( b ) 再证明 


)1, 


E( 

fe=l \ 


a(l — a ) 


— H — 7 


if ( a ; P n , P n ) = exp 


2 


<^k 


与 


2 


n 


f^k 汀 k 

- r 


(p n )<(p n ) ^ 


< 00. 


2 


CTfc 


fc=l 


2 


(E + 


< oo 是在所考察的市场上无渐近套汇的 条件； 见专著 [130] 第 


六章第3节 a ) 


§11. 中心极限定理的收敛速度 

1. 试证明不等式 （8). 

2•设…为独立同分布的随机变量序列，有 E & == 0, D & = a 2 和 E |^ i | 

现知，在这些条件之下，有如下的非一致 估计: 对一切 -OO < Z < 00,有 


3 


< 


OO. 


3 


cE|^i| 


\ F n ( x )-^( x )\ 彡 


a 3 ^ (1 + |x|) 3 * 


试证明这一结果，至少对伯努利随机变量给出证明.（关于这一命题及其证明，以 
及关于下面的第5〜7题的证明，可以参阅专著 _.；) 

3-设 （ a )^ i 是独立同分布的随机变量序列，均各以1/2的概率取值土 1. 令 
Mt ) = = i ( e -^- he ^). 仿照拉普拉斯的做法，证明 （知 = 6 +…+匕): 


7T 


P{^2n = 0} = - 


喊 (t)dt 


n — 00. 




y / ifn ' 


TV 


0 


4 .设是独立同分布的随机变量序列，均各以的概率取值0, ±1，… 

土 a , 其中 a > 1. 令= Ee 辦 1 = 

如同上题，仿照拉普拉斯的做法,证明 


a 


1 + 2^ cos tk ]. 


2fl + l 


fe=l 




7T 


P { S n = 0}=- 


^2 a + lW ^ 


n ocx 


^2 n(a + l)n 


7T 


0 
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特别地，如果 a = 1，即随机变量 a 以相等的概率取值 - i ， o ， i 时，有 


V3 


P{^n = 0} 


71 — OO , 


〜 


2%/ jrn ^ 

5. 证明，如果 F = F ( x ) 与 G = G ( x ) 是两个分布函数，/⑷与抑）分别为它们的 
特征函数,则有 




7T 


f ( t ) - g ( t ) 


sup | F ( x ) — G ( x )\ < 


dL 


4 


X 


— 7 T 


6. 证明，如果 F = F ( x ) 与 G = G ( x ) 是两个分布函数, / ⑷与 〆 t ) 分别为它们的 
特征函数，而 L ( F , G ) 是它们之间的莱维距离（第1节第4题)，则对任何 T ^2, 




都有 


T 


m — g ( t ) 


InT 


L ( F , GK - 


dt H - 2 e 


T 


7T 


0 


7 •设 F n ( x ) 是满足条件 EG = 0, D 6 = a 2 和 E ^ i | 3 -/? 3 < oo 的独立同分布的 
随机变量序列的正则化部分和 


n 


的分布函数.令/>=良证明， 


^7^ £ ^ 

i=i 

lim inf y/n F n ( x ) —伞 


x — a 


P 




-*-w 


y /27 T 


(H ， 5) 


n 


§12. 泊松定理的收敛速度 

1. 证明，在 A * = - ln(l -仇）时，有变差距离 

|| s ( P fc ) — n ( A fc )|| = 2(i 


一入 fc 


X k e~ Xk )^\l 


e 


n 


因而， || B - n ||< EAi . 

提示： 如果注 i 1 到 


一〜 


+ \Pk - Afce -Afe 

- A fc e - Afc ), 


|| B ( p fc )- n ( A fc )|| = |( i - p fc )- 

°° u 

- 

i =2 

那么不等式 \\ B ( p k )- U ( X k )\\^ Xl 就可以由这一结果和周知的初等不等式 推出: 
对于 Z > 0,有 2(1 - 

2. 试证明表达式 （9) 和 (10). 

3. 设匕，…，匕为相互独立的伯努利随机变量，有 P {“ = 1} = p fc , P{a = 0} = 

外， l ^ k ^ n . 我们令心 = 0,并且对0彡 f 彡1 ， A > 0,记 


e 


一 Xk 


一 "入紜 


+e 


e 


2 


— xe ~ x ) ^ 


—X 


e 


T ♦ 


1 


[nt] 


^ n ( t ) = y ^ fc ， 


fc =0 
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fc ^ _ At 




e 


Pi n ) ( t )^ P { S n ( t ) = k }, n k ( t ) 


fc = 0， l ，2, …， 




kl 


和 


M 


A n ( t ) = y^Pfc (= F , S n ( t )). 

fe =0 

证明，对于概率⑷和 n k ( t ), 有如下各关系式 成立: 

P 0 (〜卜 1 _ f Pt\^)dA n (s), 

pO 卜- / Vi n v ) 


(*) 




1 




和 


t 


7T 0 (t) = 1 - / 7T 0 (S-)d(As )， 


0 


*本 


t 


TTk(s-) - 7Tfc-l(>-)] d(Xs), k^l. 


丌 fc ⑷ 






0 


4. 试由上题中的 （*) 和 （**) 式，推出如下关 系式: 

f 2\ Pi n ] ( t )- n k ( t )\^ 


/ Ei ^ n) ( 

Jo fc =0 


s —) — nk ( s —)\ d ( Xs ) 


2 


k —0 


+(2 + 4 A n ( i )) 

5. 试利用第二章第 6 节第 51 题中的格朗沃尔-贝尔曼 ( Gronwall - Bellman ) 不等 
式，从 （***) 式推出（参阅第 3 题中的记号） 

史 l 4 n ) (，)- 丌 fc ⑷ K 


l ^ n (^) _ As • 


(***) 


max 

O ^ s^t 


2 Xt 


+ (2 + AA n ( t )) 


A n (^) 一 • 


e 


max 

O ^ s^t 


k —0 


并由此断言 


^|P{5 n (l) = A:}-7r,(l)| 


k=Q 


[似 1 


n 


2 + 4^ p fe 




2A 


-As 




e mm 


sup 


k 


% 


fc—* X 


k =0 


其中, min 系对正整数 （1， …， n ) 的一切不同排列 i = (奴，…，所取， 

再利用所得到的不等式，证明，如果= A ， 则 


0 . 


Pio 




fc=l 


n 


X k e~ x 






k \ 


k —0 


[削】 


彡 C ( X ) min sup p ik - As ^ C ( X ) 


max Pk 


fe — 0 
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其中 C(A) = (2 + 4A)e 2 \ 


§13. 数理统计的基本定理 


1. 试证明 （18) 式. 

证明，（距离空间 （ A 货， P ) 中的）概率测度的弱收敛 pw 藴涵 f ( xW ) 4 
f ( X ). (参阅《概率》第一卷第三章第13节中的符号 

3. 试证明 （22) 式中的蕴涵关系. 

4. 设6,6,…与讥，取，…分别为具有连续的分布函数 F = F ⑷和 G ? 二 （7(2；) 
的独立同分布的随机变量序列.令 




2 . 


N 


N 






G 


N 


k=l 


k=l 


是经验分布函数. 

我们令 


乃 iV，AfM = sup \ F n ( x ; uj ) - Gm ( x ; uj )\ 


X 


和 


㈣ =sup { F n ( x ; a ;) - Gm ( x ; Cl ；)). 


N,M 


X 


人们在两样本场合下，已知 


NM 


li 瓜 P 


D NjM (^) ^ y } = K ( y ), y > O y 


(*) 


N + M 


JV ， M 一 oo 


其中 K ( y ) 是柯尔莫戈洛夫分布（参阅《概率》第一卷第三章第 13 节). 

试根据对结论 （ 25) 的证明思路，勾画证明结论 （*) 以及断言 （ 27) 和 （ 28) 
中的思路和基本步骤. 

5. 考察“奥米咖平方”统计量 


F n (x\ a;) - F(x)\ 2 dF(x), 


木本 


其中 F = F ( x ) 是连续的分布函数.证明，与统计量 IMu ；) 和 D ^( uj ) 的情形一 
样，统计量的分布对于一切连续分布函数 F = F ( x ) 都是相同的.再证 




明 


4 AT -3 


(^) 


(a;) = 




180 iV 3 * 


6 N 
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6•设6,6,…为独立同分布的随机变量序列，有 ECi = 0, Da = 1•令 


k 


k 


Sk — s n I • 




— min 

k^n 


Sk — s 


n 


n 


n 


证明 


深 n 


d 


d 




— min \ Bt — tB \ = 


— max \ B t — tB ± 

T n 

其中， T n = {t = k / n ; A ; = 0,1，…， n}，B = ( B t ) t ^ 是布朗运动，5。 = (坷 W 
是布朗桥，而丛如同往常，表示分布相同. 

并且证明 


y/n 


T n 


T n 


2 


7T 


7T 


7T 




E^ n 


n. 






6 2 


(试比较第二章第 6 节第 87 题 •） 

7 •设 F = F ( x ) 与 G = G ( x ) 是两个分布函数，而 F _1 ( t ) = M{x ： F ( x ) > t } 与 


6? _1 ( t ) = inf {x : G ( x ) > t }. 

记 52 


. 对于 52 中的 F 与 


F : F 为分布函数，且 J ^ dFix ) 


< oo 




G ， 令 


i/2 


a 1 




d 2 ( F , G ) 

( a ) 证明， d 2 = d 2 ( F , G ) 是一个距离，称为瓦塞尔斯坦 （ Wasserstein ) 距离， 

并且汸 2 , d 2 ) 是完备的距离空间. 

( b ) 证明，如果 G ，... ， 匕 为独立同分布的随机变量，具有属于而的分布函 

数 尺设瓦 是其经验分布函数，则 （ P - a . S . 地）有 • 




d 2 (F, F n ) ^ 0 ? 


71 OO , 


( C ) 证明，距离 d 2 ( F , G ) 具有下述的 卡泊林格性质 ( Kapling - property ): 


2 


d 2 ( F , G ) = inf E(C - v ) 


其中 inf 系对所有的分别服从分布 F 与 G 的随机变量对 ($ ry ) 所取 ( F，G G 衣 2 ). 

iS 5^1 = {F : 


. 对于 I 中的 F 与 G ， 令 


F 为分布函数，且 \x\dF(x) 


8 . 


< oo 


⑴ -GT 1 ⑷ | 也 . 


( F , G ) 


0 


( a ) 证明，这一被称为多 布鲁申距离的 度量具有如下性质: 


\ F ( x ) - G ( x )\ dx , 


di ( F , G ) 
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并且 （&, 也）是完备的距离空间， 

( b ) 证明，如果仄凡， F 2 , … e 孔则 W n ) — 0, 

F n =^ F (淡收敛，参阅第 1 节）和 J \ x \ dF n { x ) f \ x \ dF ( x ). 

( c ) 证明，对于 & 中的 F 与 G , 成立下述的卡泊林格性质 •• 

di ( F , G ) = inf E | 卜 

其中 iixf 系对所有的分别服从分布 F 与 G 的随机变量对⑷ 7?) 所取 ( F , G G 仏). 

( d ) 证明，如果 $!,*■* 为独立同分布的随机变量，具有属于 Si 的分布函 

数设瓦是其经验分布函数，则 （ P - a . s . 地)有 

di(F, 瓦 ）— 0 ， 

9. 设随机变量 X 具有分布函数 F = F ( x ), xeR 及其反函数 F - 1 = F ~ l { u ), ue 
[0, 11( 参阅第8节第8题中的定义).对一切0 < p < 1，称〜= F - 1 ^) 为随机 
变量 1( 或分布函数 F = F (: r )) 的 p ■分位 数. (通常，将 F -^ l ^) 称为中位数， 
把 Kl / 4 ) 与 F ^^/ A ) 分别称为下、上 I / 4 分位数 .） 

试给出使得 fh 分位数 K p 是方程 F ( x ) = p 的唯 一 根的条件 I 

10.设 X lr .. 是具有分布函数 F = F ( x ) 的独立同分布的随机变量.以瓦 = 

F n ( x ) 表示根据 n 个变量 A ，…， 1所构造的经验分布函数 

八 I 71 

F n { x ) = F n ( x ; uj ) = ~ 

Tb 


当且仅当， 


n — > oo , 


n oo . 


k—l 


(参阅 （ l ) 式). 

证明，如果 Xi ( n ) ， … , xi n ) 是由 n 个观察值&，••• ， X n 所得到的秩序统 
计量 （ 在第一章第12节第8题和第二章第8节第19题中，将该统计量记为 

, xk n ) y 则经验分布函数瓦=瓦 ㈤ 具有下述表达式： 

如果 z < x [ n \ 

瓦 ㈤ = p / n , 如果沿 n ) ^ x<X 

ll , 如果对 n ). 

设上一题中的条件成立，〜是分布 F = FOr ) 的 浐 分位数，而 K p { n ) = F ^ ip ) 是 

相应的经验分布瓦=瓦 ㈤ 的 R 分位数.证明，如果〜是满足条件 F ( k p ~) < 
< F ( k p ) 的唯一值，则当 


0 


⑻ 


fe=l ， … ， n— 1, n>l ， 


fc + i ， 


11 


时，有 


n — > oo 


P 


( P - a . s .). 

提示：应当指出，我们有 K P ( n ) = , 并且证明，对任何6 > 0,都有 

s } = p { rnxQ ] 


« p ( n ) 




(n) 


〈托 p + 占 


POimX 


> tv p ~ 




I 




§13. 数理统计的基本定理 


• 199 • 


其中，「叫表示不超过实数$的最大整数. 

设 X 2 , • • • 是独立同分布的随机变量序列，其分布函数 F = F ( x ) 连续.对每 
个0 < p < 1,方程 F ( x ) = p 都有唯一解％,并且导函数泸⑻在点 k p 处存在， 
连续且为正.以表示样本产分位数. 

证明，随机变量(戈^ 
p )( F f ( K p )) 2 的高斯随机变量 AT : 


12 . 


依分布收敛到某个均值为0,方差为 p(l - 


^ (又以1 -〜） 

提示：设&，…，^为相互独立的在区间 [0, 1] 上均勻分布的随机变量，而 
石 7 ^，… , a n ) 是相应的秩序统计量.为证题中结论，应当首先指出，随机变量 

与随机变量 F - 1 ) - F -^{ p ) 同分布,然后利用引理 2 ,并验证关 

于中心极限定理成立的林德伯格条件（第4节定理 1). 


law 


N . 


於 ) 


f ^ p ] — Kp 





























































































第四章独立随机变量之和与独立随机变 

量序列 


§1. 0-1 律 

1. 试证明定理1的推论. 

提示： 利用随机变量7?的分布函数仅可取0和1两个值的事实. 

2. 证明，如果 ⑸啦 是独立随机变量序列，则随机变量与 lim ^ n 都是 

( P - a . s .) 退化的 • 

提示： 证明，与 lim 皆为可测的. 

3. 设 ( U ) n ^ i 是独立随机变量序列 ， SW =匕+…+ ^，而常数满足条件0 < 
b n too. 证明，随机变量 IS t 与 lim t 都是 ( P - a . s .) 退化的. 

提示: 在集合{1，2,… } 士任意取 i iV , 令 


n ^ N y 

S n — Siv , n > N . 


0, 


Sn = 


由性质可知,上极限急关于 n 义可测,再根据 # 的任 
意性，即知其关于％可测.由此不难得出所需的 

4•设 = 6 + ..• + 匕 ， n 彡 1，而 jr (5) = f ]^ n ( S ). 其中 ^{ S ) - < j{uj : 

S n , 5 n + i ) .证明，尾 cr - 代数 JT (5) 中的每个事件都是可交换的. 

5•设 (? n ) n ^ l 为随机变量 序列. 证明，对任何实常数 C , 都有 {ItoCn > 4 3 

4. 


§1. 0-1 律 
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提只需指出 


lim{G ^ c } = {to : ^ n ( oj ) ^ c i . o .}. 


试举例说明，存在尾事件 A (即属于 a - 代数= Q 的事件，其中 

多 ⑹= CT ( 匕，匕+1，… . )，而 (^ n ) n ^ l 为随机变量序列^满足条件0 < P ⑷ 
(即其概率严格大于 0 , 严格小于 1 ). 

7.设匕…为相互独立的随机变量，有 EG = 0, E 泛=1， n > 1，并且对其有中 
心极限定理成立（即有 P { S n / V ^ O }— 伞 ⑷， z e IR , 其中 S n = 6 + • * ‘ +60. 
证明，此时 


6 . 


< 


lim n ~ l ^ 2 S n — +oo ( P - a . s ,), 


(特别地，这一性质对满足条件 EG = 0, = 1的独立同分布的随机变量序列 


成立 .) 


8. 设 Ci ，6, …为独立同分布的随机变量，有 E | 匕 | >0,令^ =匕+ ..+^, n ^ l . 


证明， 


lim \ S n = +oo ( P - a . s .). 

n—OO 

9 •设为独立同分布的随机变量，有 E 匕 = 0, E | Ci | > 0,令 S n = 6 + 

…+ Cn ， n 彡1‘证明， P - a . s , 地有 


1/2 Sn = + 00 , 


lim n — 1 ’ 2 S n = 


lim 

n-^oo 


n 


—oo. 


(试比较定理 2 中的 断言; 亦可参阅第 7 题 .） 

10 •设島，為，…为相互独立的 cr - 代数.令汐=門 

71 = 

集合 G e 穿，都有 0-1 律成立 （即： 概率 P ( G ) 非0即 1). 

11 •设 Ai , A 2 ,--- 为相互独立的随机事件，有 P ( A n ) < 1, n ^ 1, P f U 

_ \n=l 

证明 P ( limA n ) = 1. 

I 2 •设 Ai , A 2) *-- 为相互独立的随机事件，记 P ( A n ) n ^ l . 根据 ( M 律可知， 

概率 P ( ISA n ) 与 P ( limA n ) 均非0即 1. 试通过 p n ，n ^ 1,分别表述出使得 
PQxmA n ) = 0, P ( MmAn ) = 1， P ( I 5^ n ) = 0和 P ( IEl 4) = 1 成立的条件 • 

13. 设6,6,…为非退化同分布的随机变量序列，记& = 6 +…+ 


U A ,证明，对于每个 




= 1. 




彡 L 证 


, n 


明， 


( a ) 对于每个博雷尔集合4 G 激 ( E )， 都有 P {5 n G A i . o .} = 0或 1. 

( b ) 仅存在 lim 5 n = +oo ( P - a , s .) 或 Iim 5 n = 


( P - a . s .) 这两种可能性， 


OO 
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并且 


如果 - P {5 n > 0} 

^ 71 
n=l 

1，如果 V - P { S n > 0} 

~~ 71 
=1 


P { lim 5 n = + 00 } = 1， 


00, 




P { lim 5 n = — oc } 


< oc . 




( c ) 如果 Cn 的分布对称，则有= + OC 和 UmSn = 

14. 根据定理1的推论，如果，…为（关于概率 P ) 相互独立的随机变量序 

列，而7/是关于由该序列所生成的尾 ex - 代数夂可测的随机变量，则 r ? ( P - a . s , 
地）为常数，即有 P { t ? = C P } = 1,其中 C P 为某个常数.现设 Q 是另一个概 
率测度，关于该测度《 2 ,…仍为相互独立的随机变量序列，那么当然也就有 
Q { t ? = Cq } = 1, 其中 Cq 亦为某个常数 • 试问，是否必有 C P = Cq ? 

15. 设义= 6 + • • • +匕 ， n ^ 1,其中…为相互独立的伯努利随机变量序 

列，即有 P{Ct = 1} = P{Ci — —1} == 1/2, i 彡 1.令 cr 。 = inf {n 彡 1 : S n — 0} 

(如果对一切 n ^ 1,都有 S n / 0,则令 

游动 { Sn ) n ^0 在如下的意义下是自 反的： 即有 P{ao < oc } = 1. 并由此推出 

r { S n = 0 i . o .} = 1. 

提示: 利用第一章第5节第7题，根据该题中的结论,对任何 n > 1，都有 

P { H #0} 

16 ■设 Ci ，&， …为独立同分布随机变量序列，有 Eiai 

Cn , n ^ 1,并设 E 6 = 0. 证明， 


( P - a . s .) 


—— oo 


0 O ) •记 Sq = O . 证明，随机 


Jo 




—2n 




2 


令 Sn = Cl + * • * + 


< OC. 


lim 5 n | < oc ( P _ a . s .), 


(试比较第 8 题与第 9 题 .） 

17. 设 X = ( X u X 2 r -) 是可交换随机变量的无穷序列（参阅第二章第5节第4题 

中的定义).令 A = a ( X n , X n +1 ,-..), 而夂= PH 是序列 X 所生成的尾 


代数 • 


( 7 - 


证明，对于任何有界的博雷尔函数 g = g ( x ), 都有 

E[^(Xi) I JT] = E [ 仙） 岡 (P-a.s.). 

再证明，随机变量 X U X 2 ，… 关于尾 a - 代数夂条件独立. 

• , X N ) 是可交换随机变量的高斯向量.证明，存在服从标准正态分布 

••， e N (£i ~« A /*(0, 1))，使得对一切 1 彡 n < iV ， 都有 


18•设 （X 

的相互独立的随机变量 


: U • • 




N 


= ct + be n + c 


E 

1=1 
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其中， M 与 C 为某些常数. 


19.设 ( X !, X 2 ,...) 为可交换随机变量的无穷的高斯序列.证明，存在由独立同分 

布的随机变量构成的高斯序列（0，&，•••)，其中 


AT (0, 1), i ^ 0,使得 


Si 


X n l = a + be 0 + c 6 


n ^ 1, 


nj 


2 0 •设 $ 1 , 6 , ••-为独立同分布的随机变量序列，服从 Pfe > x } = e -^ 

们来考察事件 A n = > h ( n )}, n > 1 ，其中 h ( n ) 是如下各种函数中的任何 


彡0.我 


，^ 


种： clnn , Inn + clnlnn 或 Inn + In In n + c In In In n . 


证明， 


0，如果 c > 1， 
1，如果 c ^ 1- 


P { A n i . o .}=： 


提示：利用博雷尔-坎泰利引理. 

2 i .设为独立同分布的随机变量序列，有 p 仪 

1/2, n ^ l . 我们来考察事件 


1} = P{Cn = 0} = 






= {€n+l = 1 ， 


， [log 2 log 2 n] ~ 1} > Th^ A. 


» ■ 


( a ) 证明， P { A n i . o .} = 1. 

提示： 先对 n = 2' m 彡 2, 考察事件 4 n . 

( b ) 试求概率 P { B n i . o .}, 其中 


Bn = {Cn+1 — 1? 


. ， Cn+[log 2 nj =1}，Tl > 2, 

22. 设 Ai ， A 2, …为相互独立的事件.我们来考察事件 


_ * 


uj : lim — I a 

n n ^ 


= 


^ x ^ } x G ] R * 


fc=l 


证明，对每个 a : G R ， 都有 


P {〜} = 0 或 1. 


§2. 级数的收敛性 

1. 设匕, $2, …为相互独立的随机变量序列.试运用三级数定理，证明， 

⑷如果 EG 
EECn / dCnl ^ l ) 收敛， 

( b ) 如果级数 ECn ( P - a , s .) 收敛，则 E^<oo ( P - a . s ,), 当且仅当 

E(m(ienK 1)) 


( P - a . s .)， 则 ECn 以概率1收敛，当且仅当，级数 


< oo 


2 


< OC. 
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2•设 6 , 6 ,…为相互独立的随机变量序列.证明， E 泛 < oo ( P - a . s .), 当且仅当, 


e n 




< OC. 


1 +技 


提示： 利用三级数定理，并注意 


Cn 


且> !} < °°]' 

3. 设《 2 ,…为相互独立的随机变量序列.证明，如下三个条件相互等价： 

( i ) 级数 ECn 以概率 1 收敛. 

( ii ) 级数 ECn 依概率收敛. 

( iii ) 级数 EG 依分布收敛， 

提示 ：最方 便的做 法是： 依次证明⑴今 ( Ui ) 今⑼今⑴.其中第一个蕴涵关系 

可由第二章第 10 节定理 2 推出； 蕴涵关系 ( iii )^( ii ) 需用反证法证明，并要用到 
普罗霍洛夫 定理； 为证蕴涵关系应当运用，例如，埃特麦迪不等式（见 
第22题）或者任何一个合适的不等式（诸如，斯科罗霍德不等式（见第4节第 
3题)，奥坦韦安尼不等式（见第七章第3节第3题 )). 如果级数 ECn 依概率收 
敛，则对任何£>0,存在 m e N = {1，2,…}，使得只要 n > m ， 就有 

P {\ S n - S k \> e }< e . 

利用上述不等式即可推出级数 ECn 以概率 1 收敛. 

4. 试举例说明,定理1和定理2中的一致有界性条件（对某个 c > 0和一切 n 彡1， 
有 PdCnl ^ C } = 1 ), 一般 来说, 是不能去掉的. 

提示: 考察独立随机变量序列 {《 n , n > 1 }，其中心的分布为 

P^n - n } = P{$n = - n } 

5 •设 Cl ，. •乂 n 为独立同分布随机变量，有 E6 = 0 , EC ? < 

+ 证明如下的与柯尔莫戈洛夫不等式单边情况相类似的马歇尔 

( Marshall ) 不等式 




Ee 


< oo 


< oo 


1 +e 


max 


2 


P{Cn = 0} = 1 


n 彡 1. 






n 2 3 


n 2 . 


令& = Ci + 


oo . 


E 纪 




P 


e ^ 0. 


max 


e 2 + E < 

6 . 设 ⑽，…为 (任意）随机变量序列.证明，如果 I ： E | e n | < OC ， 则 E Cn 以 
概率 1 绝对收敛. 

7. 设 U2 , …为相互独立的对称分布的随机变量.证明 


n 彡1 


n 彡1 


2 






E 


A 1 


n 彡1 


n^l 
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8 . 设匕 ,( 2 ,…为相互独立的二阶矩有限的随机变量.证明，级数 ECn 在 P 中 
收敛，当且仅当，级数 EECn 与级数 ED ^ n 都收敛. 

9. 设…为相互独立的随机变量，级数收敛.证明，该级数的值 
P-a.S, 地不依赖于求和顺序，当且仅当， E | E (^ n ； | CnKl )|< 

10 . 设 6 乂 2 ,…为相互独立的随机变量，有 E 心 = 0 , n > 1 及 

5 >皎 1 (^^ 1 ) + |匕|/(|匕|> 1 )] 


OO . 


< oo . 


证明级数 ECn ( P - a . s .) 收敛 

n 

11 . 设 H …为相互独立的随机事件，有 P ( A „) > 0 , = 

证明，当 


OO . 


时，有 


n — > cx ) 


E 7 ^) / E p ^)^ x ( p - a * s *)* 


3 = 1 


J =1 


12 .设 &，… 为相互独立的随机变量，分别具有期望 E ^ n 与方差并且 


— 2 


lim E^ n = c , lim 


—- OO « 


时，有 


证明，当 


n—>oo 


n 亡 n 1 

/ y i 


( P - a . s ，) • 


> c 


2 


I 3 •设 6,6, …为独立同分布的标准指数分布随机变量 ( P {6 > x } = e -\ x ^ 0). 

证明，如果对于正数知 ， n > 1 ，有 I ：知收敛，则级数 E a n ^ n 不仅概率 

n^l n^l 

为 1 地收敛，而且对一切 p > 1 ，在 p 中收敛. 

14. 设 ( m 为泊松过程的跳跃时刻序列（参阅第七章第10节)，而 a e (0, 1). 

证明,级数£ T ~ 1/ a 以概率1收敛. 

i=l 

15. 设 ( e n ) n ^ l 为独立随机变量序列，其中^服从区间上的均匀分布.证 

明， （ P - a . s •地） 有： 

( a ) 级数 E 概率为 1 地收敛. 

( b ) 级数卜 I 二 

提示： 利^二级数定理和三级数定理（定理 2 和定理 3). 

16. 定理3 (三级数定理）断言，对于由相互独立的随机变量匕， 6 ,…所构成的级数 

E ^ n , 只要对某个 c > 0,如下三个级数同时收敛，那么就有级数 I ：心 ( P - a . s .) 


OC . 


n 彡 1 


n^l 
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收敛: 




n^l 


n^l 


n^l 


其中技 = 6 JG 6 xKc ). 

试举例说明，上述三个级数（对某个 c > o ) 的收敛性中无论缺少哪一个，都 
会破坏级数 E 匕的 ( P - a . s .) 收敛性. 


n 彡1 


1 T . 设匕&，…为随机变量序列,对某个 ” > 0,有 X ： E |匕| 

时,概率为1地有心 — 0. 

18. 设^1, ^2) * * * 为相互独立的对称伯努利随机变量，即有 P{Cfc = 1} = P{^fc = 

-1} = 1 k ^ l . 证明，级数 _ 的概率分布为区间[-1， 1] 上的均匀分布. 

(试比较第 10 节第 62 题和第第 12 节第 47 题 .） 

19. 设&，《 2 ,…为相互独立的对称分布随机变量.证明，如下三个条件相互 等价： 

(1) 级数 ECn 以概率1 收敛. 

( ii ) 和 E 故 < 00 ( P - a . s .). 

( iii ) 和 EE ( dAl )< 

20 . 设 € 为随机变量，而 f 是它的对称化随机变量，亦即 f = € -匕其中 ，与 €相 

互独立,且与 C 同分布 • （假设概率空间足够丰富 •） 设 /X = M (0 是随机变量€的 
按照意义 
节第 23 题). 

证明，对一切 a > 0,都有 


证明，当 


< oo . 


71—^00 


k=l 




OO. 


( P{C > M }, P{e < ^ I 所定义的中位数（试比较第一章第4 


max 


M . 


P{|e-Ml>4^2P{|e|>a}^4P 


21. 设 Ci ，$2, …为独立随机变量序列，有 


P^n = 1} = 2-", P{《„ = 0} = 1 - 2 一 ' 


证明，级数 I ： 以概率1收敛，并且 

n=l 


rid - 

n=l 


2 ~ n ) > 0 5 


P 




而 


2 一 




E 


IK 1 

n=l 


~ 2 ~ n ). 


P 


-f 1-2 一 

=1 
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22. 证明，如果6,6,…是相互独立的随机变量序列，、= 6 + •. .+匕， rn ^ l , 

则有如下的埃 特麦迪不等式 成立： 对任何 e > 0 和 n > 1,都有 


< max 


|S m | >4e} ^4 


P {|5 m | > e }. 


P 


max 

l ^ m^n 


23 .设为相互独立的随机变量，有 = 0,并且对给定的 /I > 0,有 

Ee h “ < oc ， = 1，... ， n . 令义= 6 + …+ &，1 彡 /c 彡 n . 证明，对一切 e > 0, 

都有如下的指数型柯尔莫戈洛夫不等式 成立： 


S k ^e> ^ e~ he Be hS ^. 


P 


max 


提示： 与证明柯尔莫戈洛夫不等式类似，引人集合 A = 

= {Si < e , 1 彡 i 彡 - 1， Sk ^ e}j l ^ k ^ n . 再由延森 ( Jensen ) 不等式得 


Sk ^ S f ^ 


max 


Ee ^ s - > E e hS ^ I A - 彡…彡 e hs P ( A ). 


k=l 


时，有 K 4 Y (依 

分布收敛).又设 {%，t >0} 是与 ( Y n ) n ^ 独立的正整数值随机变量族，有 

证明， y ； v t 么 y，t 
提示： 以特征函 数作为 工具. 

25. 设 F 为随机变量， ( Y n ) n >1 为随机变量序列，有 

—Y ( P - a . s .), 

{ N t , t ^ 0} 是正整数值随机变量族（与第24题不同，此处不假定{%， t 彡 0} 
与 ( Y n ) n ^ i 独立) • 

证明如下各 命题： 

( a ) 如杲 N t 

( b ) 如果 N t — N ( P - a . s .)， 则 — 仏 ( P - a . s .), t oc . 

( c ) 如果 AT * 4 oo , 则 Y / v t 

提示: 在证明 命题⑷ 时需要利用如下 事实： 在依概率收敛的序列中存在几 
乎必然收敛的子列. 

26. 设 U 2, … 是相互独立的伯努利随机变量序列，有 P { f n = ±1} = 1/2， n 彡 1. 

证明，随机变量 X = f ：^ 是确定的，并且其分布函数具有 密度. 

n=l 

27 •设匕乂2,…是相互独立的伯努利随机变量序列，有 P{Cn =0}= P { e n = 1} = 

+ 6 n — 1, n ^ 1,并且 


24.设 y 为随机变量， ( F n ) n ^ i 为随机变量序列，当 


n — ^ oc 


p 


N t — > oc , t — > oo . 


— > OC * 


n oc ， 


( P - a . s .)， 则 Fisr t — F ( P - a . s .)，t 


― > OO 


~> OO . 


P 


t ~^ oc . 


1/2, n^L 又设 


> 0, 6 n > 0 3 


a 


a 


X n = 2a^b\ l 
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证明，如下各命题相互 等价： 

( i ) ft 几乎必然收敛（亦即 lim n Xn 几乎必然存在且不为零). 

n=l N n=l 

( ii ) fl ( 2 - x n ) 几乎必然收敛. 

n—1 

( iii ) fl ^nbn 收敛. 

提示：在证明 （ iii ) 今⑴时，应当分析 ElnX n 与 DlnX n , 并利用三级数定 


N 


a . 


2 8 •设匕， 6 ,…为独立同分布的随机变量，具有（柯西）密度函数 / Or ) 

eM . 证明，对于任何常数 m , 都不能成立 

i=l 

29. Ci ， 6 , …为独立同分布的随机变量，有 E & = m 和< oo . 证明，当 




(l+x 2 ) J 


P 


x 


m . 


n 00 


时，有 


p 


E 沾 




CI 




其中， 0 为由 n 个不同元素中取出 2 个的所有不同的组合数目 （= n(n - 1 )/ 2 ). 

30 •设 fl 乂2,…是相互独立的伯努利随机变量序列，有 P{^ n = 0} = P{^ n = 1} = 

1 / 2 , 对每个 n > 1 ,以 Z n 表示在序列匕，…，^中所出现的连续的 1 所 
形成的片断的最大长度.证明，概率为 1 地有 




lim 


Inn 


> 1 和¥合< L 

31•设$1,6, ••- 为相互独立的伯努利随机变量，有 Pfe - 1 } - Pn , P{Cn = 0 } = 

1 — Pnj Tl ^ 

( a ) 证明，如果 g PfcPfc+i < 00 , 则级数 g 以概率 1 收敛. 

( b ) 令 Pn = l / n ] n ^ 1 . 证明如下的 fefe 康尼斯的 结论： 随机变量 S = 

E Un + i 具有参数 A = 1 的泊松分布. 

1=1 


提示：分别证明，概率为 1 地有 lim 


Z 


Inn 


§ 3 . 强大数定律 


当且仅当， I ： nP ( ie | > n }< 

n=l 


2 


1 . 证明 ， EC 


< 00 , 


00 . 


提示：证明 


^ nP {| e | > n }< EC 2 < 1 + 4 E nP ⑽ > n }. 

n=l n=l 
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2. 设匕， 6 ，…为独立同分布的随机变量序列.证明马 钦凯维奇-济格蒙德 （Marc 


inkiewicz - Zigmund ) 强大数定律 （简称强大数律）的正确性：如果对某个 0 

0 ( P - a . s .)； 而如果对某个 1 彡 0 < 2 ,有 


< 


S n 


< 1 ，有 E | Ci| a < oc , 则有 


a 


n" a 


S n — tiE 


(3 


则有 


0 ( P - a . s .), 

3. 设为独立同分布的随机变量序列，有 E |^ i | = 

(辽 n ) n 彡1，都有 


E | Ci | 


< 00 




证明，对任何数列 


oo * 


S n 


( P - a . s ,). 


lim 


— a 


— oo 


n 


区间 [0,1) 中的所有有理数（在第4小节例 2 的意义下）是否都是正则的？ 

5. 考察区间[0, 1) 中的数的十进制展开式 a ; = 0.0^0； 2 …. 

( a ) 将第4小节中关于二进制展开式所建立的强大数律改述为适合于现在 

场合的形式. 

( b ) 在十进制展开$中，有理数是否都是正则的（意即当 
i = 0 , 1 ,…，9,都有* g m ( aj ) = i ) 一為） ( P - a . s .)? 

( c ) 证明（由恰姆另 S 诺伊所提出的命题) ：数 


4. 


时，对每个 


TI — > 0 O 


0.123456789101112^- 


0 J 




(在十进制展开式意义下，参阅例 2 ) 是正则的，其中 a ; 中的小数部分由所有的 
十进制正整数依次排列而成. 

6 . (埃特麦迪）证明，如果将••-相互独立的条件换为两两独立，定理3中的 
结论仍然成立. 

7. 证明，在定理3的条件下，亦可成立依平均收敛性 ( Ej^-mJ 
B . 设匕， 6 ,…为独立同分布的随机变量，有 E |^ i| 2 < cx ). 证明 


n — 00 ). 


0 , 


p 


nP {|^ i | ^ e \/ n } 0和 


ICfcl — 0- 


—=max 

y/Tl k(n 


(试比较第二章第 10 节第虹题 •） 

9. 试举例说明，存在这样的独立随机变量序列 Ci , 6 ,***, 对其依概率存在极限 
n lim 但是该极限却非以概率 1 存在. 

提示： 考察独立随机变量序列 6 , 6 ,…，其中的分布为 


P{?n = 0} = 1 


P{Cw 二 土打 }= 


nlnn’ 


2n In n 


对其有 E 瑞彡 

P {|^ n | > n i . o .} 


和 E PdCni ^ n } = 1 , 因而由博雷尔-坎泰利引理知 

n=l 


Inn 
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10 •设为独立随机变量序列，有 P{$n = ± n a } = 1/2. 证明，对该序列有强 

大数律成立,当且仅当 , a < 1/2. 

11. 证明，可以将柯尔莫戈洛夫强大数律表 述为： 如果&，&，•..是独立同分布随机 

变量序列，则 


-iSn — E^i ( P - a . s .)， 
E |^ i | = oc <=> limn ^ 1 S n = oc ( P - a . s .). 


E lCil < 


oo 分 n 


n 


证明，如果将独立性假设换为两两独立，则上述第一个命题仍然成立. 
12. 设6,6,…为独立同分布随机变量序列.证明， 




Eiei|in + ieii< 


E sup 


< oc 分 


oc . 


n 


n 


13. 令 = ^ + … + 匕， n 彡1，其中 U 2 , …是独立同分布的随机变量序列.证 

明，对任何 a e (0, 1/2], 都有如下三个命题之一 成立： 

( a ) n _ a 5 n — > cx > ( P - a . s .) # 

( P - a , s .)- 


(b) 


S n 


—ot 


n 


> —oc 


( c ) lim n ~ a S n — oo 5 lim n _ a S n = —oo ( Pu ). 


n 


n 


14. 令 S'n = + - * •+ ^ n , ^ ^ 1, Sq = 0,而《1，$2,…为独立同分布的随机变量序 

列.证明， 


( a ) 对任何 e > 0,都有 


E p { i ^ I ^ rie } 

n=l 

( b ) 如果略 < 0,则对 p > 1 5 有 


E 6 = 0, Ee ?< 


< OO 分 


OO - 


p-1 


E (玆 ) p < 


E ( sup S n 

\ n ^0 


< oo 分 


oo . 


( c ) 如果 ECl = 0,而 1 < P < 2,则对某个常数 C p ， 有 


n=l 

( d ) 如果 E^i 二0, 0 < E ^ i 2 = fT 2 < oo ①，而 M ( e ) - sup ( S n - ne ), e > 0, 


n=l 


\ S k \^ n }^2 C p E \^\ p . 


max Sk ^ n 

k(n 


max 

k(n 


n ^0 


则有 


2 


a 


lim eM ( e )= 


2 • 


译者注. 


①原 文为： E 6 =0, EC ? < 


OO, 
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15. (补充定理 2) 设匕，6,…为独立随机变量序列，有 

P{en = 1} = P{en--l}=i(l- 2 ~ n ), 

-P{Cn = 2 n } = P{^ n = -2 n } = 2 
证明，尽管此处有 E^^oo (试比较定理 2 中的 （3) 式)，却 （ P - a . s . 地）有 

n—1 

Cl H - H Cn 


—(n+1) 


0, 


n 


亦即仍有强大数律成立（换言之，仍有 （4) 式成立.我们指出，在现在的情况下， 
有 E^ n =0 7 71^ 1). 

16.设氐$2,…为独立同分布的随机变量序列，有 ElCil - OO . 证明，此种情况下， 

至少成立如下一种性质： 


I liin- = 4-00 i 

i n n fc=i J 




=1 或 p 


p 


作为柯尔莫戈洛夫强大数律的推广，证明如下的洛埃韦 ( Loeve ) 的 结果： 如果 
匕，& ,…为独立随机变量序列，满足条件 

E | 匕卜 


17 




E 

n—1 


< OC ， 


a 


n 


< 2时，有 ECn = 0,则概率为1地有 


^ 2,并且当1 ^ 


其中0 

必 — 0. 

i=l 

18. 试举例说明，存在这样的独立随机变量序列&，&，••.，满足条件 ECn = 0, n 彡1， 

但是却有 


< a 


a 


n 


n 


n 


提示: 考察这样的随机变 量匕， 其分布为 

P{Cn = — 几} 

19.设 ^1,6,*** 为独立随机变量序列，有 E^fc = 0, m 令 

6，如果161 < 

0，如果 I&I > 

证明，如下的关于大数律成立的（柯尔莫戈洛夫）条件:为了 

1 n 


( P - a . s .). 


2 


P(en = n 3 - n } 


-2 


1 - n 一 


n ^ 1* 


n 




zzz 


n 


ei n) 


n. 


p 


0 , 


fc=l 
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必须且只需，当 


时，有 


n — > oo 


1>{|匕 l > n } 

I 

fe=l 

k=l 

试举例说明，上述最后一个条件（尤其在涉及必要性时)，不能换为 条件: 


0, 


—^ 


k=l 


0 


0 . 


0 . 


k=l 


20. 设 N = ( N t )_ 为更新过程（参阅第4小节例 4): N t = J ： I ( T n ^ £), 其中 

y|» 1 

L = A +， • . + ^ Vi ， 而 {( Tn ) n ^\ 为独立同分布的随机变量序知，有 E(Jl = / i , 0 < 

根据强大数律， 有 f —告 ( P - a . s .). 证明，对任何 r > 0,都有 


fl < 00 . 


N t 


E 




(这一结果在 M 

21•设匕…为独立同分布的随机变量序列，心=:^ +…+匕，而{爪， * > 0} 

是取值于集合 {1, 2 ,… } 的随机变量族，有爪 

证明， 

( a ) 如果 E |& r < oo 5 r >0, 则 


时仍然成立，此时 1/^ = 0.) 


oo 


( P - a * s .) ? t 


—► OO 


— oo . 


^ N t 


0 ( P - a , s .)， t 


OO 


(iV t )i/r 

如果还有 Nt/t ^ A ( P - a . s .), 其中 0 < A < oo , 贝 rj 


^ N t 


0 ( P - a , s ,)， t 


— > oo . 


t x / r 


0 < r < 2,并且当 1 < r < 2 时，有 E^l = 0,贝! 1 


( b ) 如果 Ei 6 r < 


oo 


SN t 


0 ( P - a . s .), t 


> oo 


( N t )Ur 

如果还有 Nt/t ^ A ( P - a . s .), 其中 0 < A < oo , 贝 !] 


SN t 


0 ( P - a . s ,) ? t 


— oo . 


t 1 / 
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( c ) 如果 E < oo , 且 E《i = M ，贝 ! J 


^ N t 


(P-SUS.) ， 




N t 


如果还有 N t /t A ( P - a _ s .)， 其中 0 < A < oo , 贝 ! I 


SN t 


fiX ( P - a . s .), t 


提示： 为证 （ a ), 可以利用博雷尔-坎泰利引理和第 2 节第25题中的命题 
( a ). 为证 （ b )， 需利用马钦凯维奇_济格蒙德强大数律（第2题).为证⑷，应当 
利用柯尔莫戈洛夫强大数律（定理 3 )和第2节第25题中的命题 （ a ). 


22. 设/ = f ( x ) 为区间 （0, oo ) 上的有界连续函数.证明，对一切 a > 0和任何 


>0,都有 


X 


k 


lira y ^/ (x + 

—frf \ n ) 


—an ( an ) 


= f(x + a ). 


e 


k\ 


23 •设 ，… 为独立同分布的随机变量，有 E | Ci | < oo , E^x 


证明，当 






时，有 


Tl OO 


Inn 




i : 


( a ) 


jX (P ， 2US-)* 


Ink 


n 


k =2 


6； 


E ^ M ( P - a . s .)， 其中 0 < a < L 


(b) 


n 


k=l 


§4. 重对数定律 


1 .设…为独立随机变量序列,^ 〜 ^(0,1). 证明， 

( a ) P |lim 


STl -i 

y /2 In n 


0，如果 > a n } < oo , 

n 

1，如果 J ： P {^> a n } 


( b ) P{Cn > dn i - O .} 




提示：⑷固定 C > 0,证明，根据 （10) 式（《概率》第二卷 p 24), 对于事件 

= {Cn > c \/2 lnn }， 有 


n 


P ( A n ) 


\/47rlnn 

由此,并根据博雷尔-坎泰利引理（当 C > 1时，有 EP (烏） < oo ; 而当0 < C < 1 
时，有 EP (^ n ) = OC ), 以及⑶和⑷的蕴涵关系，即可推出所证 的命亂 


C 
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2.设&，&，•*•为独立随机变量序列，均服从参数为 A > 0的泊松分布.证明，（与 
A 的值无关） 


n Inn J 

提示：考察事件 = {匕 > C < p n }, 其中 C > 0,而 
时，有 EP (^ n ) < OO ; 而当0 < C < 1时，有 E P (人） 
泰利引理，以及 （3) 和⑷的蕴涵关系. 

3. 设&，&，•••为独立同分布的随机变量序列，具有特征函数 


Inn 
In In n * 


则当 c > 1 
再利用博雷尔一坎 




= oo . 




， 0 < a < 2 


e 


(参阅第三章第 6 节第4小节).证明， 


S n 


— p 1 /。 


PUim 


n 1 / 


4. 设匕七， … 为伯努利随机变量序列，有 P{^n = ±1} = 1/2. 令= € l +. ‘ .+€ n . 
证明如下的哈代-李特尔伍德 ( Hardy - Littlewood ) 的 结论: 概率为1地有 


\ S n 


lim 


<1 - 


\/2 n Inn 


提示：证明，对 a >0 和 / i >0, 有 


P {5 n > a }^ e — ha Ee hS - 


{咢}，推出不等式 


M . ch h ^ exp 


2 


a 


P { S n > a } ^ exp 




2 n 「 


再令 a = 1 + q e > 0, 并利用博雷尔-坎泰利引理.（亦可参阅《概率》第二卷 

p 335 和 p 337 中的图书文献资料 .） 

5. 验证对于不等式 （9) 的如下形式的推广的正确性•.设为相互独立的 
随机变量， S Q = 0, 乳 = & + ••.+ 红， k ^ n . 则对任何实数 a ， 都有如下的莱维 

( Levy ) 不等式 成立： 




^ 2 P {5 n > a }, 


max [ S k + _ n - Sk )} > 

O ^ fe^n 


p 


a 


其中， M ( C ) 是随机变量 € 的中位数，即满足如下条件的 常数: 


max ( P{C > M ( C )}， P {? < MOD < o * 


2 
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(关于中位数的各种不同形式的定义可见第一章第 4 节第23题 .) 


提示: 


inf {0 ^ fc ^ n : Sk + fi ( S n - Sk ) > a }, 


T = 


其中 ， inf 0 = n + 1，且 


P{S n >a}^^P{r = k} = ^P 


[Sfc — ^{S n — Sk)\ > a > • 


max 

0^/c^n 


fc =0 


6. 设 Ci ， …， Cn 为相互独立的随机变量，有= 0，1 ^ I ^ n . 令5^ = fi + …*+^. 
证明，对 a > 0,有 


P { max Sk > a } ( 2 P { S n > e - E |5 n |}. 


l ^ fc^n 


7 •设 ^ 1 ,**- An 为独立同分布的随机变量，有 E 6 = o , a 2 = < oo 和161 ^ 

( P - a . s .), i < n . 令 = Ci + … + 6 i . 证明，对一切 0 < a ; < 2 c _1 , 都有 

(1 + xc ) 


c 


nx 2 a 2 


^ Ee xSn 彡 


exp 


在上述条件之下，再设存在实数序列 （如) ，当 
o ( n ). 证明，对一切 e : > 0和充分大的 n , 都有 


时，有 a n / y/E 


n — > oo 


—> oo 


和 


a 




71 


{- 為 (1+e) }. 


P { s n 〉 } 〉 GXp 


8. 设心 ，…， ^为独立同分布的随机变量，有 E 心 = 0,心 I 《 c ( P - a , s .), i 《 n •令 
D n = t 证明，对于& = 匕 + … + Cn ， 有如下的普罗霍洛夫不等式 成立: 


a 


ac 


P{Sn > a } ^ exp 


? d G M- 


arcsin 


2D 


2 c 


9 •设 &,&，••• 为独立同分布的随机变量序列，对某0 < a < 2,有 E | a| a - oo . ffi 
明， （ P - a . s •地）有 


1&| 


lim 
n n 


1/a 


(由此重对数律不成立 •） 

10 .设 Uf . 为独立同分布的随机变量序列，有 E 匕= 0, Eg = 1. 令& = 

心+ . • • + € n ， n 彡 1. 证明，随机变量序列 


S n 


v 2 nlninn 


n 彡1 


的极限点集概率为1地重合于区间[-1， 1]. 
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11.设匕，心，…为相互独立的随机变量序列，均服从正态分布 Af ( m , a 2 ). 令 


ID ， 


m 


试由上题的结果推出：随机变量序列 


m n — m 


y/n 


\/2 nlnlnn 

的极限点集概率为1地重合于区间卜^7, (7]. 

12. 设&，&，•.•为独立同分布的随机变量序列，具有连续的分布函数 xeR . 


n^l 


记 


F n ( x ; cv ) = ^ t < ar )， 


x e M 


fc —1 


为经验分布函数 ， n > 1. 

证明，概率为 1 地有 


\fn sup \ F n ( x ) u ) - F ( x )\ 


=sup ^ F ( x)(l — F ( x )). 


lim 


\^2 nln Inn 

13 .设 ㈣ ，… 为独立随机变量序列，具有指数分布 P{Ci > x } 

以博雷尔-坎泰利引理中的断言作为基础（亦可参阅第1节第20题)，证明，概 
率为1地有 


> 0‘试 


e 


x 




Cn - Inn 


Cn 


— Inn — In In n 

- = ： I. 

In In In n 


=1 ， lim 


lim 


=1 ， lim 


In Inn 


Inn 


如果随机变量的分布为 PUi > x | - e -^, z 彡 0, 其中 A > 0,那么上述结 
果有什么可以看得见的变化? 

14. 设匕，心，…为独立随机变量序列，具有指数分布 P{$i 

中 A > 0. 证明，如果= max (心，…，匕)，则有 

15. 设…，为相互独立的随机变量，记 So = 0 ， Sk = Ci + ■ * * + Cfej fc < n * 证 


>0,其 


— \x 


e 


，忠 


( P - sus *), 


lim 


A Inn 


n 


明 


( a ) (补充第 5 题）我们有 


|^ + fi(Sn ~ Sk )\^ a }^ 2 P {\ S n \ > a } 


P 


max 

l ^ fc^n 


其中， MO 是随机变量 € 的中位数. 

( b ) 如果6,…，^同分布并且对称，则有 


^ nP {|^ i |> x } 


I6tl > ^ 2P{|5 n | > x}. 


彡 p 


— e 


max 

l ^ fc^n 
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16.设心，…，^为相互独立的随机变量，记& =心+…+心， l ^ k ^ n . 证明如 

下的斯科罗霍德不 等式： 对任何 e > 0,都有 


|灸| ^2 s }^ min P {|5 n -5 jfc | < e }- P {\ S n \^ s }. 

I l^k^n 


p 


max 

l^k^n 


提示：考察停时 r = inf {1 ^ fc < n : \ Sk \ ^ 2 e } (令 inf 0 

第 5 题中的证明思路. 


+ 1), 并采用 


= n 


17. 设€ 1 ， …，^ 为随机变量,记恿 = Ci +…+ 1 ^ fe ^ n . 证明，对任何 e > 0, 


都有 


€ 


|6| ^2 P 


P 


\^ k \ ^ o r • 


max 

l^k^n 


max 

l^As^n 


而如果随机变量 6 ，…，^相互独立，并且都服从对称分布，则对任何 e > 0,都 


有 


} 


£ 




P 


max 




2 


§5. 强大数定律的收敛速度和大偏差概率 


试证明不等式 （8) 与 (20). 

提示：令€二 - 6首先证明 


1. 


H [ a ) — sup [a A — i >{ X )] = H (— a ). 


X€M 


再利用不等式 （7). 

2. 证明，在集合 A (参阅 （5)) 的内部，函数 0( A ) 是下凸的（如果随机变量《非退 
化，则是 严格凸 的)，并且无限次可微， 

提示： 令 A * = inf A , A * = sup A ， 证明（在条件 （3) 之下，有） • 

入 G A 


AgA 


^ A * < 0 < A * ^ oo ? 


并且在区间 （ A * ， A *) 上，函数 ( p ( X ) = Ee x 《 无限次 可微. 至于 ip ( X ) = ln ^( A ) 的 
凸性，可由赫尔德不等式得出. 


3. 在随机变量 f 非退化的假定之下，证明 H ( a ) 在整个实直线上可微 5 并且是（下) 


凸的 • 


提示： 确认 


如果 a ^ 




a *， 


丑⑷ aAo ( a ) - 4( Ao ⑷)，如果 a * < a < a % 

如果 a > 


A*(j — ), 


a • 
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其中，矽 ( A ) = ln <^( A ), 而 


= lim 嗲’ ( A )， 


= lim 嗲 ’( 入). 


a 


a 


aix 


xrx 


( A * 与 A * 的定义见上题提示 .） 

4. 证明如下的关于克拉默变换的反演 公式: 


^( A ) = : sup [Xa — if ( a )] 


(对于所有的 A , 至多去掉集合 A = { A : i ^( A ) < 00 } 的端点). 

5.设6，^，…为独立同分布的简单随机变量序列，有 E 6 < 0, P{^i > 0} > 0. 

记 S n = + …+ € n ，n > 1.令 ( p ( X ) — Ee x ^ 1 ft ! inf ( p ( X ) = p (0 < p < 1). 

证明如下结果（切尔诺夫 ( Chernoff ) 定理)： 


lim — lnP { S n > 0} = lap . 


(*) 


n 


6. 利用 （*) 式证明，在伯努利场合 ( P{Ci = 1} = P ， P{Ci = 0} = q )^ Mp < x < l y 


有 


lim — lnP { S n ^ nx ] = — H ( x ), 
n n 




其中（试比较第一章第 6 节中的记号) 


H ( x ) = x In — + (1 — a :) In -—— 

p 1 — p 


7•设 Ci ,&, …为独立同分布的随机变量序列，有 E^i = 0, Dfi = 1. 令& = 
心+…+匕， n 彡 1. 又设 { x n ) n > i 为数列，当 


时，有 


和沬 


0. 


n — ^ oo 


证明， 


眷 (1+2 M ) 


P{^n > X n y/n ] = 


e 


其中 


0, 


Vn 


n oa 


s . 利用 ㈣ 式证明，在伯努利场合 ( P{$i = 1 } = p ， p { a 二 0 } = g )， 有: 

( a ) 对于 p < x < l ^\ x n — — p )， 有 


卜紐 (p+ ^) (1+ 0 ( 1 )) j • 


P {5 n > np + x n } — exp 


( 


) 


* 本 * 


其中 


0, 有 


( b ) 对于 


a 


Xrt a 


> 00 , 


y/n 


2 


X 


P{^n > Tip + X n } 


(1 + 0(1))^. 




exp 






2 npq 


试比较 (***) 式与 0***) 式，并将它们与第一章第 6 节中的结果进行比较. 
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9•设…为独立同分布的随机变量序列，具有柯西分布，其密度函数为 
f ( x ) = 7{ T ^) ， xeR ' 证明， 


} 


lim P max ^ < a : 

t— kx) l fl l^k^n 


6 


10. 设匕， 6, …为独立同分布的随机变量序列，有 E ^|< oc . 证明， 


lim —E 


= 0, 


(试比较第3节第8题中的结果 .） 

设€为随机变量,有 Ef = 0 和证明，对每个 h >0 , 都有矩母函数 


!!• 


Ee ^ < 


提示： e 〃 x 是 z 的下凸函数. 

12. 设心,…， Cn 是独立同分布的伯努利随机变量，有 Pfe = l }= p ， P {6=0} 

Q , p-b q = I . 记 ^ + ■ ■. + 匕. 试证明如下的切尔诺夫不等式：对于 0, 




有 


_2 71 2D 


P { S n — np ^ nx } ^ 

P{|Sn — 打 p| > nx} ^ 2e 


e 


—2nx 


提示： 在这里，以及在下面的若干习题中，都应当利用伯恩斯坦不 等式: 


P{^n e^ hy Ee hS -, h^O. 


13. 证明，在上题中的条件下，事实上还可以有更强的结论成立，即有如下的关于最 

大值的不 等式： 


—2nx 


(Sk - kp ) ^ nx > ^ 


P 


max 


e 


— 2 flX 


|5 fe — kp \^ nx > ^ 2 e 


P 


max 


提示: 利用指数型的柯尔莫戈洛夫不等式 


( S k - kp )^€> ^ e ^ he Ee h{Sn ^ np) 


P 


max 


(参阅第 2 节第 2 3 题) • 


14•设 a ,*-* , Cn 是相互独立的（不一定同分布的）取值于区间[0, 1] 的随机变量. 

令 Sn = Cl + …+ ■记 


E5 


， q = 1 — p. 


P = 
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证明，对所有的0彡： r < a 都有 


P { S n - ES n ^ nx } ^ e n ^ x \ 


其中 




g — x 


Q 


P 


i ){ x ) ~ In 


p + x 


q — x 


提示 •. 利用不等式 


y P { S n Be hS - = Ee 

^ Ee hSn - 1 (1 — p + pe h ) ^ 


HS 


x Ee^ n 


h 


rt 一 


e 


^ (1 — p + P ^) 


n 


* * • 


再选择恰当的 a >0. 

15. 在上题中的条件下,证明如下的霍 夫丁不等式， 它是第12题中的切尔诺夫不等 

式的 推广： 对于^ > 0,有 


2 


— 2nx 


P {5 n - E 5 n ^ nx } ^ 

P {| S n — 'ESnl ^ nx } ^ 2 e 

提示： 注意到 i ；( x ) ^ -2 a : 2 , 并利用上题中的结果. 

16. 设心，…，^是在区间 [0, 1] 中取值的相互独立的随机变量.证明,对任何£>0, 

都有如下的不等式 成立： 

P{^ n ^ (1 


e 


2 


—2nx 


) E 5 n | ^ exp |- i £ 2 E 5 ra | ， 


— € 




^ (1 + e ) EiS n \ ^ exp ^ —[(1 + s ) ln(l + e ) — e ]^ S n 

e 2 ES 


P 


{ 


n 


^ exp 




2(1 + s /3) j / 


提示： 为证前一个不等式，可利用第14题的 结果， 注意 iP (- x P ) ( ~ px 2 /2, 
0^ x < l . 为证第二个不等式，可利用关于第14题的提示，由它可以得到 


P { S n ~ BS n ^ nx } ^ [ e^ h (l - p + pe h )] n . 


17-设 Cl ,-*- ,$ n 为相互独立的随机变量， 有 （H 0 ( bi , 其中叫，\为常数 ， i = 

令&二6 +…+匕.为推广第15题中的霍夫丁不等式，证明，对 


1 


>0,有 


X 


n 




2 


2 


P {5 n - ES n > 怎}彡 exp 


—2 x 


k=l 


n 


y^(fefc — afe ) 


2 


2 


P{\s n - ES n \ ^ x } ^2 exp 


~2 x 


fc=l 
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提示： 利用第11题中的不等式，由该式可以推出 


n 




P { S n - ES n e -^ Ee fe ( 乂 — E 〜） ^ 


~hx + - 


exp 


fc=l 


然后再选择恰当的纪 

18. (大 偏差） 设 ( en ) n ^ i 是相互独立的标准正态随机变量序列 （ Law (60 = #(0，1)), 

令 S n 二 6 + … +匕 ， n > 1. 证明，对 一 切 A e 都有 


2 


s n 


x 


e A 


lim — In P 


inf 


: x ^ A > . 


ess 




2 


n—oofl 


n 


(如果/⑻是在 （ E , ^( E )) 上给出的实值博雷尔函数，那么就将 ess inf {/( x ) : 

e A } 理解为 sup |c G M ： X{x G A : f ( x ) < c } = o |, 其中 A 是勒贝格测度; 
试比较第二章第 10 节注3中关于上确界存在性的定义 

提示:试分析表达式 


X 


S n 


n 


2 


/ 2 dx 


Pi — eA 


一 nx 


e 


27 T 


n 


A 


时的极限性状. 

19. 设•…， &) 为高斯向量，有 E & = 0, i 


在 


71 OO 


证明 


=1，… 


71. 


lim 


In P < max Ei ^ r 

\ l^i^n 


a 2 




提示： 首先证明，对一切 r >0,都有 


2 


/2 


P { max fi ^ E max Ei + ar > ^ e 

I l^i^n l^i^n I 


其中 


( E ^ 2 ) 1/2 , 然后再证，对一切 1 < i < n , 都有 


a = max 

1 彡 i 彡 n 


{- r V ( 2 ^ i )} 

y/27t(l + r/(Ti) 


r 


P < max ^ r > >1 —少 






(Ti 





































































































































第五章强（狭义）平稳随机序列与遍历 


理论 


§1•强（狭义）平稳随机 序列. 保测变换 


1.设： r 是保测变换 , e = C 是随机变量，有数学期望 ECM 存在.证明, E ^ O ；) = 

Ee ( n ；), 


提示： 如果 i = I A r 则由保测变换的定义知等式 E ^( u ) = E ({ Tuj ) 

成立.根据线性性质，知该式对于形如 f ： x k i Ak , A k e ^ 的随机变量€也成 


fc=l 


立. 接下来就应该利用数学期望的结构和（关于 o 0的）单调收敛定理.最后， 
对于一般情况，利用表达式 e = e + - r 即可. 

2. 证明，例1和例2中的变换 r 是保测变换 ®, 

提示:(关于例 2 )如果 A = [ a , 6) £ [0, 1)，则对这样的 A ， 等式 P ( A 卜 
P ( r - M ) 显然成立.对于一般情况，令 

溪([0, 1]) : P ( A ) - P ( T ^ A )}, 

(运用“恰当集合”方法）证明 , i =溪([0, 1)). 

3•设0 = [0, 1)，多=溪([0, 1))，而 P 是某个具有连续分布函数的概率测度.证明， 
变换 Tx = Xx , 0< A < 1,和变换 7 \r = a ; 2 都不是保测变换. 

提示： 由于测度 P 的分布函数连续，所以可以找到 a , 6 6(0, 1), 使得 


2 


W a )) = ~, P ([0, b )) 

①在本章中，一每假定概率空间⑴， 多， P ) 是完备的. 


=： 


3 
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利用这一性质，即可证明 r：r = A:r (0 < A < 1) 与 r：r = x 2 都不是保测变换. 

4.设 Q 是所有两端无限的实数序列 0^ = (..• 

可测柱集 { w : ( u k , ■- 
B n 6 m ( R n ), 所生成的 (7 -代数.设 P 是可测空间供多）上的概率测度.定义 
两端变换 r 为 


…）的集合，多是由 

* ;灸= 0,土 1, 士 2，**.， 


)} € B ni 其中 n = 1, 2, • • 


•? ^k+n-l 


r (… 


). 


7 a; 一 i, a ； o, Wi 5 … 


…， ^1 5 (^2 j 


* * * 


证明， r 是保测变换，当且仅当，对一切 

B n e 涿 ( ir )， 都有 


0,士 1，士2, •… 和 


=1，2 ,…；^ 


n 




P{W : (6J 0 , … 


l ) ^ B n } = p { a » : ( UJfc ， …， LOk + n - l ) ^ B n }. 


5 ^n — 


5 •设…是取值于某个博雷尔空间 S 的平稳随机元序列（参阅第二章第7 
节定义 9). 证明，可以（允许是在增广后的原概率空间上）构造出一个也取值 
于 s 的随机元序列…，使得两端无限的序列…是平 


稳的 • 


6•设 r 是概率空间（％多， P ) 上的可测变换，#是 Q 中的子集所组成的生成多 
的 7 T - 系（即 7 T ⑷= 多). 证明，如果等式 W ( T ~ l A ) = P ( A ) 对所有 Ae ^ 成立， 
则它对所有 Ae ^ 都成立. 

7•设 T 是概率空间 （ Q ， 多， P ) 上的保测变换，爹是多的子 a - 代数.证明，对于每 
个 A e 多，都有 


P ( A | W )( Tu ) = P ( r- 、 I T ~ 1 W )( uj ) ( P - a - s .). 

特别地，如果即由数列 = (yo 

设 r 是移步变换: r ( W 。，£ Ji ， … ）= (0；1， a >2，• • •)( 换目之，如果 
则 ^ k ( Tuj ) = u k +1 ). 那么，此时 （*) 式具有如下形式 •， 

p ⑷匕胸二 pcr-^i “) M ( P - a . s .). 

8. 设 r 是 （ a 多）中的可测变换，少是 r 所能保持测度 p 不变的所有概率测度 
P 的集合.证明， 

( a ) 集合少是 凸的. 

( b ) T 关于测度 P 是遍历的，当且仅当， P 是集合淨的边缘上的点（亦 
即， P 不能表示为 P = A 1 P 1 + A 2 P 2 的形式，其中入丄 > 0,入 2 > 0, A t + A 2 = 
1 ， Pi ^ P 2j Pi , P 2 e 少). 

9 •设 r 是概率空间 （a 多， p ) 上的保测变换，而 s = $(0；) 是某个随机 变量. 证明， 
C = CM 是几乎不变的随机变量（亦即 CM = ^( Tu ) ( P - a . s .)), 当且仅当，对每 


(*) 




…）所构成的空间，而 


0；1，6^2 




1 




叫， 
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个有界的多 ® ^( M ) 可测的函数 G ( u , X), 都有 

EG(W C(^)) = EG(Tcj, ⑽). 

提示： 首先考察形如 G x {uj)G 2 {x) 的函数 G(uj, x). 


§2. 遍历性与混合性 

1. 证明，随机变量 C 是不变的，当且仅当，它是/可测的. 

2. 证明，集合 A 是几乎不变的，当且仅当， P ( T ~ l A \ A ) - 0. 

证明，如果 X 是几乎不变的随机变量 （BP X ( u ) = X ( Tuj ) a . s .)， 则存在 
不变的随机变量叉=叉亦即对一切 

P { X ( u ) = X ( u )} = 1. 

3. 证明，变换 r 是混合的，当且仅当，对任何满足条件 EC 2 < 00 与 Er ? 2 < 00 的随 
机变量€与7/，都有 


0,都有 X(u) - X{Tu)) y 使得 


U) G 


E^(T n u)r](u)) E^(u)Et](uj) 


(*) 


n — > oo. 


提示： 如果 7 J 二 I A ， 卜 I B ， 则性质⑷就是混合的性质.而 L 2 中的每个 
随机变量€与7/都可以（在 L 2 中的祖离之下）用示性函数的线性组合逼近到 
精确度为任意的 e > 0的程度.有鉴于此,不难由混合的性质推出所要证明的数 
学期望的收敛性. 

4. 试举例说明，存在保测的遍历变换不是混合的. 

提示： 考察 n = { a ， &}， p ({4) = p ( W ) = 1/2,而变换 r 则定义为 r a = 


b，Tb = 

5 .设 r 是概率空间 （ n , 多, P ) 上的保测变换,设 w 是 n 的某个子集类，有 a {^) = 
多.假设定义4中的关系式 


a. 


lim P ( Anr — n J 5) = P ( A ) P ( J 5) 

n—►oo 

仅对 A , Bes ^ 成立.证明，该性质对多 = a ( s ^) 中的所有 A 与 B 都成立. 

再证明，如果 W 是使得多= 7 T (¥) 的 7 T - 系，则上述断言仍然成立. 

6•设 （ Q ， 多）= ( E °°, 潘 ( E 00 )), 而对于 w =(以，怎 2 ,…），变换 r 是移步 变换: 
r ( a : l 3 私…）二(奶， x 3 , …).证明，每一个不变集合都是“尾的”(换言之，不 

变集合的 a - 代数/属于“尾” a - 代数叉=其中 々= a(uj ' 

)). 试给出不是不变的“尾”事件的例子. 

7. 试分别给出 （ a 多, P ) 上的保测变换 r 的例子，使得 

⑷由 Ae ^- 根本推不出 TAe ^. 

( b ) 由4 6多与 TM e 多根本推不出 P(A) = P{TA). 


Xnj ^n+1 ? * 


* _ 
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§3. 遍历性定理 

1.设 （ = ( Ci 5 ^ 25 •'') 是平稳的高斯序列，有= 0和协方差函数 R(n) — 
E 6 + n 6 -证明，条件 R(n) ^ 0是使得与 S 相应的保测变换为混合的（因而 
也是遍历的）的充分条件. 

提示： 如果 A = {cu ： ( K 2, ■ . _ ) € Aq }, B = {(J ： ($1, ^2) … ）€ Bq}j 而 
B n = {to ： ( Cn 』 n + 1 , …） e Bo}, 则应当证明 

P ( AnB n )^ P ( A ) P ( B ), 


n — oo. 


该性质的证明步骤 如下： ~ ~ 

( i ) (根据给定的 e > 0，） 找出 m G N = {1，2, … } 和集合 1 0 e B 0 € 

使得 


P ( AAA ) < e , P { BAB ) < e , 

其中 A= {uj \ ( Cl ,-- - , Cm ) € A 0 }, B ^ {uj ： ( Cl ,--* 3 Cm ) € Bo}. 

( ii ) 再找出开集 e ^( R m ) 和5 。 e ^( R m ), 使得集合 


: (Cl ， …， Sm) G A )} 和 B = {CJ ： ( Cl , * * * ,^ m ) € ^ o } 


A 


满足条件 


r ( AAA ) < e , P ( BAB ) < 

从而就有 P ( AAA ) < 2 s , P (5 AS ) < 2 e . 

( iii ) 由平稳性知，对于集合 B n = {uj : (匕,… ^ n + m ~ i ) e 5 0 }, 也有 

P ( B n AB n ) <2 e . 

( iv ) 设 P 是随机向量（匕，… ，6 n ) 的分布，而 Qn 是随机向量（&，•. .，&， 
, fn + m - l ) 的分布，则有 


6 


R(n) — > 0 Q n ' P ⑧ P 、 

(V) 根据第三章第1节定理1，可以由 （ iv ) 得出 


n — > cxd. 


limP ( AAJ 5 n ) ^ P{A)P(B). 


结合已证的关系式 r ( AAA ) < 与 P(B n AB n )<2e J 可得 


limP(A n B n ) ^ ( P ( A ) - 2e){P{B) - 2s) - Ae, 


由此并由 e > 0 的任意性，即得 


limP(A n B n ) ^ P ( A ) P ( J 5), 
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( Vi ) 可类似证得 


limP(A n B n ) ^ P ⑷ P ㈤ . 


(不过，应当将选取开集和馬改为选取闭集 .） 

2. 证明,对于任何由独立同分布的随机变量所组成的序列€ = (匕， 6,…)，与其相 
应的保测变换都是混合的. 

提示： （首先指出，在现在的情况下，序列的遍历性可以直接由 “0- 1 律”推 
出为证混合性质，可按下述步骤进行： 


( i ) 令 


A = {o ； : ■ • *) £ ^4o|j B = {uj : (Ci) ^2? * •') € Bo }： 


其中 Ao , S 0 G ^( E °°). 根据所取的 e > 0 , 找出 
A 0 e ) 5 使得对于集合 A = { u ： (匕，…， G ) e 為}，有 P(A AA )< 

( ii ) 再令 


N - {1,2,. .} 和集合 




m E 




石?1 = : (Cm Cn +1，••’）€ 丑 ()}• 


时，就有 


那么，当 


n > m 


P ( AnB n ) = P ( A ) P { B n ) - P ( A ) P ( B ). 


( iii ) 试推出 \ P { AnB n )~ P { A ) P ( B n )\ ^ 2 e , 以及当 
B n )^ P ( A ) P ( B n ). 

3. 证明，平稳序列 € 是遍历的，当且仅当，对任何 S e ^( R k ) } A : = 1， 2 ,…，都有 


时，有 P(A n 


n — > oo 


丄 …乂 ㈣ -丄）— ^ k ) eB } ( P - a . s .). 

71 L J 


提示： 为证必要性，我们以 Q 表示序列 s = ( 匕，&，...）的分布 （ Q 是 H 00 
上的测度).令 r 为移步 变换： 




=($2，怎3,…）€ M°°. 


(怎1，戈2,…）€肢 


T ： 


x 


X 


还应该对无=1，2, •…， 引入函数/ : ( xi , X 2^ • • • ) €肢 
M , 并将遍历定理（伯克霍夫-辛钦定理）用于该 函数； 丑 e m { R k ). 

为证充分性，应当证明所引入的变换 r 是遍历的，换言之，/中的每个集 
合（即不变集合）的测度都是0或 1. 


… ， Xk) € B) E 
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性质 


~ …€ b )— p{d ， • 

t=l 

意味着对每个形如 {( x 1} ... , x k ) eB }, Be ^{ R k ) 的集合 A e 溪(肢°°)，都有 

1 n 

-— Q ⑷ （ Q - a , s .). 

71 


- € B } ( P - a . s .) 


该式与遍历定理（伯克霍夫-辛钦定理）中的断言一起蕴涵 Eg ( I A I /) = E Q I A 
( Q - a . s .), 这就表明，每个形如 {( x u …，抑 ） € B } 的集合4都与/独立,其中 
Be m ( R k ). 再运用“恰当 集合” 方法，证明 






^ = {Ae : A 与 ^/ 独立 } 


重合于最后，再由此推出 £ /与夕独立，从而任何不变集合的 Q 测 
度都是0或 1. 这就确立了变换 r 的遍历性，也就意味着序列 C 具有遍历性. 

4. 假设在可测空间 （ a 多）上给定了两个概率测度 p 和 P ， 关于它们的保测变换 
T 是遍历的.证明，或者有 P = P , 或者有 P 丄歹 • 


5•设 r 是概率空间 （ Q , 多, P ) 上的保测变换， W 是 Q 的某个子集类，有 a (^) = 


多 . 令 




k =0 


证明,变换 r 是遍历的，当且仅当，下列条件之一 成立: 
( i ) 对任何 a e 滄，都有 


/(^)^ P ( A ). 


( ii ) 对任何都有 


-n— X 

lim -^2 p (4 n T ~ k B ) = P ( A ) P ( B ). 


k —0 


( iii ) 对任何 4 e 多，都有 


4 n ) 叉 P ⑷. 


6 .设 r 是概率空间 （ q ， 多， p ) 上的保测变换.证明，变换 r (关于 p ) 是遍历的， 
当且仅当，在 （ Q ， 多）中不存在测度 p ^ p , 使得 P 《 P ， 并且关于测度 P , T 
聽测 变换. 
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7. (伯努利 移动） 设 S 是某个有限集合（记 S = {1， 2,… ， iV })， 而 Q 是由序 

) 所构成的空间，其中咕 e 令 ^ k { u ) = u k , 并且定义移步 


列 6J = ( 

变换 = (奶，％…)，如果用 • 来赫，即如果 ik ( uj ) 

则有 ^ k ( Tu ) = Wfc +1 . 假设在集合{I， 2 , …， AT} 中的元素 i 处陚给一个非负实 


( Jo , 01， • 


• • 


叫 , 




N 


数内，使得 Ep^i (亦即数组 pi ,P 2,*- 
义，可以在(^ 00 , ^( S °°)) 中给出一个测度 P (参阅第二章第3 节): 


.， PN 形成一个概率分布).利用这个定 


P{w: (Wi,--* ,U k ) = Ol，”. ,Uib)} = p Ul 


换言之，以保证随机变量 CdMAM ， …的相互独立性为原则来引入概率测度 
P. 关于这个测度 P， 移步变换 T 就称为伯努利移动，或称为伯努利变换. 

证明，伯努利变换具有混合性质. 

8.设 r 是概率空间 （Q, 多， P) 上的保测变换.记 n = {T~ n A : A e 多 }. 我 

们称 CT- 代数 


门 


T _ n 多 




是平凡的 （P- 平凡的)，如果 ^- oo 中的每个集合的 p 测度都是0或 1. 具有平 
凡的 a- 代数 多- ㈤ 的变换 r 称为柯尔莫戈洛夫变换.证明，柯尔莫戈洛夫变换 
具有遍历性，并且具有混合性质. 


9. 设1 < p < 00,而 r 是概率空间（％多， p ) 上的保测 变换. 设随机变量 e 
LP (Q, P). 

证明如下的 ^ (0, P) 中的冯.诺依曼遍历 定理： 存在随机变量 7]( U ), 


使得 


江 en 咖） 

fc =0 

10. 关于正则性的博雷尔定理断言（第四章第3节例 2), 区间 [0, 1) 中的数 a; 的二 

进制展开式中的0和1的比例（关于勒贝格测度）几乎处处收敛到 1/2. 试通过 
考察按如下方式所定义的变换 r : [0,1) — [0, 1): 


E 


0 


n — > 00- 


T(oj) = 2u (mod 1) 


并利用遍历定理 l, 证明这一断言. 

如同第10题，设 a； e [0, 1). 我们来考察这样的变换 r : [0, l) — [o, l): 

如果0 = 0， 


11 . 


0 , 


r ㈣ = 




，如果 
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其中， {$} 表示实数 a: 的小数部分. 

证明，该变换 r 保持区间 [0,1) 上的按照如下方式定义的高斯测度 p = 
p ㈠不变： 


dx 


5 A e 翊 0,1)). 


p ( A ) = 

12. 试举例说明，关于“增长性，，的泊松定理(第1节第3小节）在无限维可测空间 

中可能不成立. 


ln2 


x 


A 
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§ i . 协方差函数的谱表示 

1. 试由 （11) 推出性质 (12). 

提示： 所要求证明的性质可以通过适当选择的数值4和 叫， 1彡彡 n 来 
得到，例如，如果取 m = 2, ti = 0, t 2 = n , 则可得到不等式 

(| ai | 2 + |奶| 2 )丑 (0) + aia 2 R (- n ) + aia ^ Rin ) ^ 0. 

如果在此取 別 = a 2 = 1与 ai = 1， a 2 = i , 并考虑到 R {0) 6 M = (-do, 00 )， 则 
可得到 R ( n ) + i ?(— n ) € 1 R 和 i ( R ( n ) + R (~ n )) G M , 从而意味着 R (~ n ) = R ( n ). 

2. 证明，如果由 （27) 式所定义的多项式 Q ( z ) 的所有0点都在单位圆之外，则自 
回归方程 （24) 有，并且只有一个,平稳解可以表示为单向滑动平均的形式. 

3. 证明， （22) 与 （24) 中的谱函数序列分别具有如（ 2 3)和（ 2 9)式所给出的密度. 

提示： 关于对 （23) 式的证明，需要按照如下方式 进行： 首先断言 R ( n ) = 

t an + Wfc , 然后验证 R(n) = J ^ e iXn f (\) d \ 1 其中 /( A ) 由 （烈） 式所 给出. （采 
fife 式 e^dX = 27 vS n 0 是有益的，其中 U 是克罗内克符号 .） 

4. 证明，如果§ \ R ( n )\ < cx ), 则谱函数 F ( X ) 具有如下形式的谱密度 /( A ); 


n= —c 

并且该级数在复空间 l 2 = L 2 ([-7V, 7T), 7T), ll) 中收敛，其中 0 为勒贝 

格测度. 


—iAn 


R ( n ) 


e 


I 
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提示： 利用这样的事实： 

^([-7 r , 7 r ), fi ) 中的正交系，其中 M 为勒贝格测度， 

5. 设(匕 )^0 是具有零均值的高斯-马尔可夫平稳序列.证明，协方差函数珂 n ) 可 
以表示为 


1 

\/2ir 


是 L 2 = L 2 ([—7 T , 7 r ), 


0,±1 3 ±2, 


n 


e 


n = 


(t m m 


2 


R ( n ) 


A n , 


(7 




其中 a 是某个满足 o < a < l 的实数. 

6 . 设 AT = ( N t ) t>0 是参数为 A > 0的泊松过程（参阅第七章第10 节). 定义（具有 
连续参数的)过程& = H — 1产，其中€ 是与# 独立的随机变量，有 PR -1} = 
P {^_1}= I . 证明，= 0,且其协方差函数为 EUt = 

7. 设 （ UnX ) 为这样的序列： Z 叫⑽ ㈣ 打―取)，其中，对 一 切 fc = l ， …， iV ， 

k=l 

都有办 > 0 ， h > 0,而? 7 i ,.. . ，狀是独立的随机变量，且在区间（0, 27 T ) 上均勻 
分布.证明，序列 ( Cn ) n ^ O 是广义平稳序列. 

设 Cn = COS rup , 其中 n > 1，而 W 服从区间 [- 7 T , 7 T ] 上均匀分布的随机变量.证 

明，序列 ( Cn ) n ^ l 是广义平稳序列，但不是狭义的平稳序列. 

9. 我们来考察单向 p 阶滑动平均模型 ( MA ( p )): 


—— s \ 


， s ? t ^ 0* 


e 


8. 




0, 士1，士2,…，而 e = (^)是白噪声（第1节例 3). 试求方差和 

(Cn » Cn+fc). 

10. 我们来考察一阶自回归模型 ( AR (1)): 


其中 


n 




协方差 


COV 


二 Q0 + Gl^ri — 1 + 


其中 , e = ㈨ ）是白噪声（试比较第1节 （25) 式). 

设 |叱| < 1. 证明，如果 E | e 0 | < oo , 则有 


a 0 (l - a?) 


ao 


ECn = + —J 


n —> oo ; 


1 — ai 


— oix 


如果还有 D | Co | <00, 则有 

= afDCo + ^ 


(1 — a \ n ) 


2 




71 —> 00 ； 


2 


2 ， 


一 a l 


— a l 


与 


< j 2 a ? 


(Cn ， Cn+fc) ^ 


COV 


n oo . 


2, 


— a 
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T ^)* 证明，序列 （匕) n >0 是平稳的（既 


11 . 设上题中的&服从正态分布 

是广义的，又是狭义的）高斯序列，并且有 


.-go.- 

1 —ai } 


2 


Q ；0 


a 


E^n = 


， D 匕 = 


1 ~ a i 


1 — a \ 


与 


( 《 n, Cn+fe) = Z 2 * 

丄一 Off 


① 


cov 


§2. 正交随机测度与随机积分 

1. 试证明⑻式与⑹式的等价性条件. 

提示：为证 （5) 今（6)，应当取 △„ i 0, A n € #0, Dn = E \ A n , D 0 = 0; 于 
是五 =E ( PADfc - i ). 由⑻推知 Z ( A n ) = Z ( E )~ Z ( D n ) ^ 0 (记号丑 2 见 

《概率》_^卷 P 58). 

设/ € L 2 , 试利用第二章中的结果（第4节定理1，第6节定理3的推论和第3 
节第8题)，证明，存在形如 （10) 式所示的函数序列 ( f n ) n ^ u 使得||/„ — /|| — 


oo 


2 


0, 


71 — 00. 


P 


提示： 证明思路 如下： 取 e > 0,找简单 函数 〆 A ) = £ fkI Bk (X), 其中 

fe=l 

B k e f k e C , 11/ - g \\ L 2 < e /2. 然后再找集合 e 鬲，使得测度‘ 
m ( A fc A B k ) 足够小 ， fc 二 1, …， P . 于是函数 / i ( A ) = f ： f k lA k (X) 具有如 （10) 

式所示的形式,并且有||/ — h\\ L 2 

3. 试证明具有函数结构 m ( A ) 的正交随机测度 Z ( A ) 的如下 性质： 


/ c=l 


< £• 


E | Z ( Ai ) - Z ( A 2 )\ 2 = m ( A x A A 2 ), 

Z ( AAA 2 ) = Z ( Ai ) - Z ( A X O A 2 ) (P — a . s .)， 

Z(Ai A A 2 ) = Z ( Ai ) + Z ( A 2 ) - 2 Z ( A X O A 2 ) (P - a . s .). 


4. 设《 =( 匕）是平稳序列，具有 E 匕 = 0,协方差函数 R ( n ) 和谱测度 F ( dX ). 令 
5 n ^ ei +-'*+ Cn - 证明，方差等于 


S 1 ^ F ( rfA ). 


7 T 


BS n = Y ,^ 71 - ㈨ )丑⑻和 D5， n 


sm 


2 


— 7 T 


m < 


n 


(其中，核(璧^ 1 )称为费耶尔 ( Fejer ) «.) 

译者注. 


(匕， W 卜白 | 


©原 书为: 


COV 
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5.设 /( A ) 为谱密度 ( F ( dX ) = f ( X ) dX ), 并且 /( A ) 在 A = 0处连续.试利用上题中 
的关于 BS n 的积分表达式,证明， 


DS n = 2丌/(0) • n + o ( n ), 


n —4 oo . 


p .弱（广义）平稳序列的谱表示 


1. 证明， Ll ( F ) = L 2 ⑻(有关符号参阅定理1的证明). 

提示： 根据第2节第2题的结论，所有函数 /( A ) e L 2 ( F ) 都可以依 L 2 ( F ) 

中的模被形如 g ( A ) = f ： f k I Bk ( A ) 的函数逼近到任意近的地步，其中风 e V ， 


fc=l 


而磨是半开闭区间 [ a } b ) 的有限并的代数，此处 -7 T < a < 6 < 7 T . 所以只需证 
明，形如 I [ a ib) ( A ) 的函数可以用形如 e n ( X ) = e iXn 的函数的线性组合来逼近，其 
中 n = 0, 士 1, 士2,这些函数可以用连续函数逼近，而连续函数自身又可以用 
函数 e n ( A ) = e 


0,士 L 士 2,...， 的线性组合来逼近（魏尔斯特拉斯 I 通 


iXn 


， n 




定理)， 


2.设 C = (&) 为平稳序列，具有如下 性质： 对某个 iV 和一切 n ， 都有 ^ N + n ( uj ) = 

^ e 0. (此处及下面，符号€ =(匕）中的 n 均理解为两个无限的整数 
= 0，±1，土2,… ,） 证明，这样的序列的谱表示可以化为第1节中 （13) 式. 
提示：由条件 R(N) = 況⑼可以推知，谱测度 F 在区间 [-7 T , 7 T ) 中是分段 
常数的,其跳跃点为 


71 


27 Tk 


Afc = 


+ 2啊， = 1，…， iV ， 


N 


其中 Pfc 为整数，使得 Afc G [-7 T ，7 T )， 从而谱表示就呈如下形式: 


N 


e iXn Z ( dX ) ^^ e afen Z ({ A fc })* 




j[—7T ， 7r) 

3. 设 $ = (心）为平稳序列，有 = 0, 且对某个 C > 0, a > 0,有 


fc — 1 


N-l N -1 

EE 释-卜去 I ：啡）1 


k 


( CN — a . 


N 2 


N 


k =0 1=0 




试利用博雷尔—坎泰利引理，证明 


N 


— 0 ( P - a . s .) 


N 


> oo . 


A;=0 


4. 设序列 C =(“）的谱密度 々( A ) 为有理的 


剔 = 
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其中 P ^ Z ) 

且多项式 Qn 的根都不在单位圆中. 

证明，存在白噪声 e = ( £ m ), 使得序列 （《 m ) 是 n 维序列（仏，…，以)，仏= 
的分量，满足方程组 


a o + + …+ a n _ i2 ； n_1 ， 而 Qn (^) — 1 -\~biz + .. • + b n z n , 并 




Cm+l — Cm" 1 + A^m+1, i 

n — 1 


= 1 ， •… ,71—1, 


c 




m +1 


3=0 


i -1 


其中 A = ao , (3 i 


- 0 kh 

A;—1 

5. 称狭义平稳序列 $ = (€ n ) 满足强混合条件，如果 


叫一 1 


一 fe ， 


a n (C) = 


( P ( AJ 3)- P ( A ) P ( B )| — 0, 


sup 

力⑽ oo(e) ， Be 行⑹ 


其中 ^ oo (0 = Uo ) 与^ 0 = ^ n , en + l ,*-0 分别为随机变量族 
(6 U <0 与 mk > n 所生成的 a - 代数.（试比较第二章第 8 节第 7 题 ,） 

证明，如果 X 与 y 分别为 a _ 代数 f %⑹与 JT n OO 可测的有界随机变量 

(\ X \^ C U | fkc 2 )， 则有 


EXY- EXEF| ^ 4 CiC 2 a n (0- 


是平稳高斯序列，而 


6•设 $ = ( Cm ) 


— cx >< m<oo 


Pn(0 = sup EXr , 


X,Y 


其中的上确界系对所有满足条件 E | X | 2 - E | y | 2 - 1的分别属于由随机变量族 
( Cm ) m ：^0 与 ( Cm ) 

叉与 F 所取. 

证明如下的柯尔莫戈洛夫-罗扎诺夫 ( Po 3 aHOB ) 不等式 

(0 ^ Pn(0 < 27ra n ⑹， 

(试比较第二章第8节第7题中的不等式 

7. 以上题中的不等式为基础，证明，如果平稳的高斯序列《= (60 具有连续的谱 
密度 /( A )， 并且该谱密度函数具有一致的正的下界（即有 /( A ) > C > 0, A G 
[-7 T ，7 T ])， 则该高斯序列满足强混合条件. 

8. 通过恰当选择随机变量 A 与 A 并考察序列$ =(心)，其中& = Acos(An + 
9\ A ^ O , 以确认，尽管广义平稳序列的协方差函数可能不是周期函数，但是它 
却可能具有周期性的样本轨道. 


所生成的闭线性流形与 L -(0 的所有随机变量 


m^n 


a 


71 
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§4. 协方差函数和谱密度的统计估计 

1. 设在 （15) 式中，有 〜 #(0，1).证明，对任何 n ， 当 JV 


时，都有 


oo 


7T 


(l + e 2 inA )/ 2 ( A ) dA . 


(N - | n |) DHisr ( n ;— 2 ?r 


一 7T 


提示: 利用 （15) 式中关于高斯变量^的假设条件，可以证得 （n > 0) 


7 T 


7 ( 


(1 + e in ( A + l / ))# iv— n (A - u ) f { u ) f { X ) dud \, 


(AT — \ n \) UR N ( n ; = 2 tt 


— 7T ^ 一 7T 


其中 ^ N - n ( X ) 是费耶尔核.由此即可推出所需要的结论. 
2. 证明 （16) 式及其如下形式的 推广： 


2/ 2 ⑼， A 


P = 0, 士 7 T ， 

lim cov (/isr(A; f N ( u ; 0) = { / 2 ( A ), A = i / ^ 0, ± tt , 

iV—oo 




A ♦ 


0, 


v . 


3. 考察一阶自回归模型 （ AR (1)): 


Cn = 沒 Cn — 1 + 


71 > 1， 


n? 


(试比较第 1 节 （25) 式和第 10 题模型)，其中， cr 是已知参数 （a > 0), 而6 e R 
是未知参数，需要利用观察值6 乂2,…对其进行估计. 

Pe ( xir - ,^ n ) 是参数 <9的极大似然估计，其中 

1 71 

2^2 Yl ^ xk ~ u 


设沒 


= arg max 


71 


2 


: P〆 工1，…，工 n ) = 


exp 


(V27TOT) 


n 


k —1 


是随机变量 Cl , •■- 的概率分布密度 e = ( e n ) 是髙斯白噪声). 


证明， 


n 


E Ufc 


On = 


fc=l 


n 




A;—1 


4 華设 


約刚 (6, …，匕) 


ln(0) - E e 


de 2 


是第3题中模型 （ AR (1)) 中的费希尔信息 ( E $ 是根据序列《1，《2,…的分布 p 
计算均值)， 


9 


证明 


n 


2 


( a ) I n (0) EC 


fc—l- 


p 1 
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( b ) 当 


时，有 


71—00 


n 


W < h 


1- 沪， 


2 


n 


W = i 3 


In { B ) 


2， 


e 2 


n 


e\ > i . 


(炉 -1) 

对于第3, 4 题中的模型 （ AR (1))， 证明,极大似然估计 I 具有如下的渐近 性质: 


2 5 


5 


_ 


I 少 ㈤ ， 

lim P^{\/ ln(0)(0 n — 6>) ^ 


叫< 1， 

0=1， 


Ch (: c )， |^| > 1. 


其中 ，屯 (X) 是标准正态分布函数， 的 1 ) (X) 是如下的随机变量的 分布: 

Bf - 1 


(9. 


1 

2V2jB^ds 


o 


(B = ( B s ) 0< s <1 是布朗运动，见第二章第13节)，而 Ch ⑻是以为密度 
的柯西分布（第二章第3节表 3). 

6. 在上题中的条件下，证明 


处) ㈤ ， 


州笋1， 


71 


(fin 一❹、《 


lim P 


e 


0=1, 


k=l 


其中， H ^ 2) ( x ) 是如下的随机变量的 分布: 


Bl -\ 




hJBjds 


0 


(这就表明，如果用以正则化随机变量 e n - o 的不是费希尔信息，而是随机变量 

那么所得到的极限分布就不是三种，而是只有两种 .） 

\k=l J 

7, 证明，（第3题中的）极大似然估计 I 具有如下所示的均值一致渐 近性： 


1/2 


71 




sup \ O n ~ 9 


0 


8 
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§5. 沃尔德分解 


1. 证明，具有离散谱（例如，谱函数 F ( X ) 为逐段常数）的平稳序列是奇异的. 

提示： 所考察的序列 f =(匕)，其中 n = 0，±1，±2,…，可以表示为如下形 


式: 


E 


iAfcn 




k = 


— oo 


0,±1，土 2,... 是相互正交的随机变量，有 Ezfc = 


其中， 

0, E \ z k \ 2 = a 2 k (采用这些记号，有 F {\) = E E ^ I < oo ). 应当证明 

k : Afc^A 

H (0 = 5(0, 其中，丑⑹是 L 2 (0 中的由随机变量 e = ( … ， Un , •.) 所生成 


Z {{ Xk }), k 


Zk 




fc= —oo 


的闭线性流形， S (0= A 凡⑹ ，而丑 n ( C ) 是由随机变量 r =( …， 


所生成的. 

为证等式 H(0 = 5(0, 只需证明，对每个 n € 都有^ e 5( e ). 而由 
平稳性知，又只需证明心 e 5(0, 亦即证明，对任何整数 iv 与5 > 0,都存在 
V ^ 使得 .— y ?|| if 2 < 

为此目的，应当验证，作为该随机变量，可以对适当的 n ^ N , 将其取为之 
(为此，对于给定的5 >0,应当取 M ， 使得5： <<占/2,再证明 


n* 


|fc|>M 


2 


E 4 广 - i |， 

\ k\^M 


然后确认，对任何 JV e Z 和 e > 0, 都存在 n^N, 使得 | 

2 ■设 < 二 E|Cn — Cnl 2 , t = E(^ | 馬 ⑹ ). 证明，如果对某个 n > 1 ，有 g = 0 ,则 

则序列《是正则的. 

3. 证明，平稳序列 e =( 匕 ) ， ^ 叫是奇异的，其中随机变量 9 服从区间 [0, 27T] 
上的均匀分布 . 试求变量 ^ 的线性估计量&，并证明非线性估计 


iX k n _ 


1| < e ? \ k \ ^ M .) 


e 


序列 C 是奇 异的； 而如果有 4 R (0) 


, n —> oo , 


n 


Co 




给出了根据“过去”样本 f = ( … ，“， Co ) 对& 所作的无误预测，亦即证明 


- Cn| 2 =0 ， 71 ^ 1 . 


提示: 为证序列$ = 的奇异性，需要证明“ =是白噪声，亦即 

= V ^7 T £ n 具有如 （3) 的表达式* 

4. 证明，关于分解为奇异部分与正则部分的分解式⑴是唯一的. 
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§6. 外推、内插和过滤 

1. 证明，定理1中的断言，在没有诸如“伞⑷具有收敛半径 r > 1, ^( z ) 的零点都 
分布在区域 M > 1中”之类的假设下，仍然成立. 

证明，对于正则过程，⑷式中的函数 也 (z) 可以表示为如下 形式： 


2. 




^(z) = V2 tt exp 


k 


<i ， 


t ： Cq 


CkZ 


z 


/ c=l 


其中 


ikX 


In f(X)dX. 


Cfc — 


e 


2 ?r 




并由此推出， 一步 上的预报错误 of = E |6 - 6 1 2 满足如下 的塞格 (Szego ) -柯 
尔莫戈洛夫 公式： 


a\ = 2tt exp 


In f(X)d\y 




2 tt 


提示： 关于塞格-柯尔莫戈洛夫公式的证明可按下述步骤 进行: 
a ) 首先证明 


| e a -^( A )| 2 /( A ) rfA , 

其中， & ( A ) 由⑺式给出.综合 （*) 式，定理1中的符号，以及 /( A ) = ^ 

| 伞 ( e _ a )| 2 , 即知 = | b 0 | 2 . 

( ii ) 由本题的前一部分，知 


a l = ll^i ~ CillL 


(*) 




少 ( 之） = bkZ k — \/27rexp 

fc =0 

故知 &o = V ^7 rexp {^ Co }. 因而 




k 


-Co 


CkZ 


2 


fc=i 


a\ — 2 tt exp 


In f(X)d\ > • 


-Co > =2tt exp 


2 


27T 


3. 在没有假设条件 （22) 的情况下,证明定理 2. 

4. 设不相关的信号0与噪声 I ?分别具有谱密度 


/0(A) = i |1 + M- 


fv 〔入 ) 




2w |l + 6 2 e^ iA p* 

试利用定理 3 ,根据值6, 找出变量 0 n + m 的估计 0 n + m , 其中6 = Ok + m . 

将谱密度换为 


/^(A) = —12 + e-^l 2 , f v (X ) = — , 


再解答同样的问题. 
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§7. 卡尔曼4西滤子及其推广 

1. 证明，在情况 (1) 之下，向量 m n 与 

E[m；(^ n 

2. 证明，在情 况⑴与 ⑺之下，量 7 Q 和所有的系数，至多除了系数 ao ( n ，0, 
Ao ( n ,0 之外,都与“随 机性” 无关（即与《无关).证明，此时条件方差 7n 亦与 

“随机性”无关: 7 n = E 7n . 

3. 证明，方程组 （22) 的解由公式 （23) 所给出. 

4 . 设叭 C ) 二 （ I 匕）为高斯序列，满足情况 （1) 中的部分条件： 


不 相关: 


m 


)]= 0 . 


m 


^ n+i = a 9 n + bei ( n + 1), Cn+i = + 丑 e 2 (n + 1). 

证明，如果 A # 0, & # 0, B / 0,则滤子的极限误差 7 = Jim 7 n 存在，并且等 
于如下方程的 正根： n ^°° 


丑 2 (1 — a 2 ) 


b 2 B 2 


7 2 + [ 


— 6^J"y 一 


= 0 . 


A 2 


A 2 


提示： 如果利用 （8) 式，则可发现 


2 


7 n 


a 


7 n+l = + a 2 7 n 


c 2 +7 n 


a ^ x 2 

c 2 +x 


其中 C 2 = (長 ) 2 . 换言之，我们有 7 n+1 = /(7 n )， 其中/⑻= 6 2 + 

0. 该函数是非降有界的.有鉴于此，即可证得，极限 lim 7n 7 )存在，并且满 
足方程 


2 


,X > 


2 


+ [ c 2 (l — a 2 ) — 6 2 ]7 — h 2 c 2 = 0, 


7 


由韦达定理知，该方程有唯一的正根. 

5. (内 插法； [71， 13.3]) 设 （ K ) 为部分被观察的序列，遵守正则性关系式 （1) 和 


⑵. 


假设向量的条件分布 


? r a ( m ， m ) = P (0 m ^ a | #4) 


为正态的. 

⑷证明，对于 n > m ， 条件分布 


7t a (m, n) = P(0 m ^a\ J^) 

仍然是正态的， 7r a (m, n) 〜 n) ， 7 ( 771 , n)). 

(b) 试 ( 根据多 if) 求 （ 0 m 的）内插估计 /i(m, n) 和矩阵 7(m ， n). 
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6. (外 推法； [ n ，13.4]) 设在关系式 （1) 和（ 2 )中，有 


ao ( 几， C) = a 0 (n) + a2(n)Cn ， «i(^ 5 0 = «i(n), 

A o (^ 0 = 烏⑻ + M ( n)^ n ? Ai ( n } = Ai ( n ). 


( a ) 证明，此时条件分布 7 Ta } b ( m , m ) = P (6 > m ^ a , < 6| J ^), n > m ， 是 


正态的. 


( b ) 试求外推估计 


和 E (^| J ^), n ^ m . 

T . (最优 控制； [ n , 14.3]) 考察“受控的”部分被观察的系统队， Cn )0« iV ， 其中 


沒 n +1 = Un + 沒 n + 6£ 1 (fl + 1) ? 

Cn+1 — 己 2 (打 + 1)* 


此处，“控制 ” u n 是％可测的，且对一切0彡 n 彡 AT — 1，都有< oo ; 量 

与 e 2 ( n ) 均与⑴和⑺中的相同 


1 ， … ， iV; 《0 = 0 ， Gq 〜 A^m， ，)• 

我们说，“控制 Y = 05,…是最优的，如果 V ( u *)^ sup y ( u ), 其 


n = 




u 


中 


V ( u ) = E Y ^{0 l ^ ul ) + 0 2 n • 

^n—0 . 


证明，最优控制存在，并且满足 下式: 




本 


* 


= 0,1， • • 




U 


n 


ny 


n 


其中 


- ' 如果 a # 0, 

如果 a 二0, 


a 


© _ 


a 


0, 


量 { P n ) o ^ n ^ N 满足递推关系式 


P n - 1 + P n+1 ™ Pl +l [l + P n+1 ]® ? P N = 1， 


而 ( m ；) 由如下的关系式所定义: 


+ 7 n (^ + 7 n ) 0 ( Cn+l 


本 


本 


)， 0彡 n 彡 iV — 1， 




m 


= u 


— m 


n+l 


Tb 


n 


其中 m 5 


=m 


7 ； + l-(7 ； ) 2 (l+7；) e , O^n^N-1 


7* 




+i 


且 73 = 0. 
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8. (变点问题中的非线性 滤子； [129]) 在统计检验中，例如，在食品质量问题中，属 

于观察变量的概率特性问题可以在某个随机时刻0发生改变，这个时刻就是 

(在生产过程中）发生变化的时刻，也称为变点.下面介绍关于发现变点的贝叶 
斯 ( Bayes ) 提法，我们假定所考虑的问题与充分统计量相关联. 

设在某个可测空间 （ A 多）中给定了一族概率测度 { P -： 7 TG [0,1]}, 随机 
变量0的取值集合为 {0,1,2,-..}, 而随机变量观察值序列 x u x 2 r ^, m&iw 
下 条件： 


= fc } = (1 — 7 r ) p fc , 其中 p k > 0, ^2 pk = l - 


( i ) ^{0 - 0} 

( ii ) 对于每个 TT € [0, 1] 和 n > 1，都有 


丌， 




fc=l 


PMli 彡 ^ 1 ，•… } X n ^ x n } = TrPqXi ^ xi , • - , X n ^ x n } 

n — 1 

+(i - ^2pm p °{ x i ^ 

fc=o 

+ (1 — 7T)(p n+ i +p n+ 2 + . • ,)P°{^i 彡 


< Zfc + i ， … 、 X n ( x n } 


Xlj 


* •* 


" ，义 n < G IR - 


Xl , 


* ■ 


n 


( iii ) P ^{ X 1 ^ x u --^ X n ^ x n }= n P j { X k ^ x k }, j = 0 , 1 . 

(这些假设 （ i ) 〜 （ iii ) 的直观意义是：如桌 S = 0或0 = 1，则从一开始观察，变点 

就已经存在.此时与生产过程中的变点相应的量 U 2, …是独立同分布的， 
均服从分布函数 F x ( x ) = P ^ X ^ x }. 如果 0> n , 则变点在时刻 n 以后出现， 

从而 , X n 对应于生产中的正常步骤，是独立同分布的随机变量序列，均 
服从分布函数 F 0 ( x ) = P °{ X 1 ^ x }. 如果 0 = k , 其中1 < A : < n ， 则随机变量 

A ，… , X fc _! 独立同分布，服从分布函数 Fo ^), 而随机变量 , X n 独立 
同分布，但分布函数却是 F ^ x ). 我们假设 F 0 ( x ) ^ 朽 ㈦ .） 

设九 ㈦ 与 fi ( x ) 分别是凡 ㈦ 与 F \( x ) 分布密度（关于某个被凡 ㈦ 与 
F ^ x ) 所控制的分布,例如， ( F 0 ( x )+ F 1 ( x ))/2). 

以 T 表;(关于（爲 i ) n >0, 其中多0 = {0， Q }， 多 n = 0 T (& ，…， X n ) 的）马 

尔可夫时，它是关于变点发生的报警信号的发出时刻.作为这样的时刻，可以用 
两个变量来刻画其 特性： 其一是假警报概率 p-{r < 6 }, 其二是在警报信号正 
确发出的情况下（意即 T >吖与变点发生时刻的平均延迟时间 E -( r -0)+. 

自然希望能找到这样的时刻 T ， 它能够同时减小假警报概率和平均延迟时 
间.但由于这样的时刻不存在（平凡情况除外)，人们引人贝叶斯风险 (C > 0)： 

ir(T) = P^ir < 0} + cE，- 6 >)+， 

称时刻 T * 是最佳的，如果对于一切 7 T G [0, 1], 都有 p -{ r * < 00 } = 1，并且对于 
所有 PK 有限的马尔可夫时 T ， 都有不等式 R -( r *) ^ R -( r ) 成立， 

根据第八章第9节第8题,这样的时刻 f 是存在的，并且（在 


(1 — 
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p ) k - x p , 0 < p 彡1， fc 彡1时）具有如下的简单 结构: 


= inf {n > 0 : 


彡 A }， 


本 


ir 


n 


其中， A 是某个与 c 和 p 有关的阈值常数，〜是在时刻 n 以前出现变点的后验 


概率: 


彡0,满足如下的递推关 系式: 


n > 0 5 ITo = 7 T . 


ir 


n 


( a ) 证明，后验概率 


丌 


n 


nj 


开 n/l(In+l) + P(1 开 n)/l(^Cn+l) 


刃 >1+1 = 


/l( 义 n+1) + P(1 _ 丌 n)/l( 义 n+1) + (1 — 丌 )(1 — 丌 n)/oP^n+l) 


7 T 


n 


( b ) 证明，如果外- 


，贝！ 1 


7 T 


1—7T 


Tl 


fi ( X n ^ x ) 


n 


<fin+l = (P+<Pn) 


仰 = 


(1 — P )/ o (^ n + l ) 


1 — 7T 


( c ) 记 w = Wn ( p )， 并令 TT = o 和 ^ = 证明 

p |0 V 

fo ( x n+1 y 

注： 如果令軋 = J ⑺ < n ), 则 7 T „ = E - (0 n I 爲0,是基于观察值 X u …， X n 
的 l 的均方意义下的最优估计.由⑷ ( b ) 和⑷，我们看出，统计量 7 T „, 外和 
tAn 满足非线性递推关系式，按照通常的说法，（在根据观察值 X U …， X n 估计 
过程 (0 n ) n ^0 中的值0的问题中)，它们构成了非线性滤子. 

⑷证明，序列 （7 T „) 岭。， { ip n ) n >0 与序列 (^ n ) n ^ O 都分别（关于（多)与 

概率测度 P ' 7 T € [0,1]) 是马尔可夫链，而 （0„) n 列(关于 (^) n ^ O 与测度 P °) 
是马尔可夫链. 


V ^ n +1 = (1 + 咕 n ) 


IpQ = 0- 


第七章构成鞅的随机变量序列 


§1. 鞅和相关概念的定义 

1. 试证明条件 （2) 与条件⑻的等价性. 

提示:应当采用反证法. 

2. 设 a 与 t 都是马尔可夫时，证明 t + ^， T V % t A ^也都是马尔可 夫时; 并且 
如果对一切 (j e n ， 都有 a ( cj )^ t ( cj ), 则有晃 T G 义.试问，如果仅有概率为1 
地成立 a (丁， 那么这一性质能否保持？ 

提示： 如果对一切 W e fi ， 都有 a ( u >)^ t ( u )), 则对任何 A G 义，都有 


^4 n {t = = ^4 n {a 彡 n} n {t = 几} e ^ ni 


从而 A e 多 V . 

3. 证明， T 与都是鳶可测的. 

4 . 设 F = ( Y m 毳）是鞅（半鞅)，而 F =队， ^ n - x ) 是可预报序列，且 （F . y ) 
是可积随机变量， n ^ O . 证明， V ， Y 是鞅（半鞅). 

5. 设负2 % 2…是非升的^代 数族乂 是可积的随机变量.令= E(C | 旄). 
证明，序列 ( X n ) n>l 形成逆鞅，即对任何71 > 1，都有 


n 


E(J^ n | X n +1 ， X n +2, … ） =^n+l (P-a.s.). 

6 .设6,…为独立随机变量序列，有 P{《i =0} = P{Ci = 2} 

f [^ 证明，不存在可积的随机变量€和非降的 (7- 代数族 (^ n ) n ^ U 使得 X n 






2 . 
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m I ^n) (P-a.s.), n^l. ( 这个例子说明，并非所有的鞅序列 (X n ) n>l 都可以 
表示成 (E^\^ n )) n>l 的 形式 ; 试比较第一章第 11 节中的例 3.) 

提示： 应当采用反证法 . 

7. (a) 设 6,… 为独立随机变量序列，有 E|Cn| < oo, E^„ =0, n^l. 证明，对 
每个 A; ， 如下的序列都形 成鞅： 




5Z 


对 ）= 


n > k. 


l < ii < … 


(b) 设 … 为可积随机变量序列，使得 


《1 +… +匕 


E(Cn+l | 匕 7 • • • ， Cn) 


(= x n y 




Tl 


证明，序列， … 形成鞅 . 


8. 试举例说明，存在这样的鞅序列 x = (x„ ， ^ n ) n ^u 其中的随机变量序列 {x n7 




>1} 不是一致可积的 . 


71 


9 • 设 X = {X n } n>Q 是具有可数状态集合五 = {iJr -} 与转移概率阳的马尔 
可夫链（第八章第 1 节 )• 令 0 0 ⑻， xeE 是有界函数，使得对于 A > 0 和 
i 6 E ， 有 Pij^U) ^从 (0 ( 这样的函数称为 A- 峰态的 ，或 A- 调和的). 证明 , 


jeB 


序列 {X~ n ^(X n )} n>0 是上狹 . 

10 . 设 n ， T 2 ， … 为停时序列，使得逐点地有 r„ 丄 T 或逐点地有 r„ T T ， 则在两种情 

况下 , r 都是停时 . 

11 . 若 ^ 与 r 都是停时，则有 


^erAr = H ^r, ^aVr = U ^r). 


•- 为停时序列，有 


12. 设 a 为 ( 有限 ) 停时，而 


证明， 


丁 1 ，丁 2，. 


"Tji OO. 


^crAr n T 


而若 T n 丄 T ， 则有多 r = fl 多 r„ • 

n 

13 • 设 ••- 为相互独立的标准高斯随机变量序列 （ Cn 〜 #(0 ， 1)) ，而 S n 

《1 +…+ ， n 彡 1 •令 






S 2 n 


X n = 


exp 


2(n + 1) J 7 

巧 = ，匕 ). 证明，序列 (X ni ^) n>1 是鞅 . 


Vn+l 
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14 . 设 X = (X nj 多 n) n > Q 为随机序列， AX n = X n ~X n — u n > 1 ， {n} x dx )= 

P(AX n e dx I ^ n _i)(cj) 是条件期望的正则支 . 对 W e E ， 令 


A(u)o = 0, A(u) n =Y1 (e 贿 - 1) 咖； {A：} X 血)， 


l ^ k^n 


n 


E 


iuX 


iuXh-i 


^n(w) = e 


△ 辱 ) fc. 


e 


fc=l 


证明，过程 M(u) — (M n (u), ^n)n^l 是鞅 • 
15. 符号同上题，对 u e 艮令 


G(u) n = Y[ f 


G(u)q = 0, 


u(u; {A:} x dx)^ n > 1. 


IUX 


e 


假设 G(u) n > 0, n 彡 1. 证明，序歹 ! 1 


iuX 


e 


e 


，即序列 


、多 n 


多 n 


G(u) 


n 


I! K(e iuAXk I 多 fc 一 i) 


n 


n 彡 1 


k=l 


n^X 


是鞅 . 


16. 设 X = (X n , ^ n ) n> 0 为随机序列，对某个 c > 0 和一切 n > 1 ，都有 |AX n | ( 


(P-a.s.). 令 


c 


X 


e 


Yn = 


n 


nE ( e ^|^) 

t=l 

其中 △ 不 =Xi — Xi^ Ol. 证明，（实值）序列 y = %, ^n)n^l 是鞅（试比 
较上面的第 15 题 ). 

如果取消关于 |AX n | 的有界性条件 , 那么结论是否仍然成立？ 


17. 设私 =0, S k =L + …+ & 其中 Ci , …，^是相互独立的标准正态 


A/*(0,1) 随机变量.记 ^(x) = P{^i < x}, 多 jt = cr ( 心， … ，匕 ) ，1 ^ k 多 b = 

{0 ， D }. 对 a G M ■，令 


o ^ — Sk 


X k = ^ 


\fn — k J 


证明，对任何 aeE , 序列 X = {X k ，， k ) Q 物 都是鞅 . 

18. 设 S 0 =0, & = 6 + -__+^，其中匕,…，^是独立同分布的随机变 

量，服从某个对称的分布 . 记 F(x; k) = P{5 fe ^ x}. 作为上题的推广 ， a G E, 
令 Xk = F(a-Sk ， n-k). 证明，序列 X = (X k , ^ k )o^n 仍是鞅.（该结论的 
一个应用，参阅第 2 节第 12 题 .） 
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19.设匕，&，…是独立同分布的随机变量序列，服从分布 F = F ( x ), z e R . 设 


n 


F n ( x ; cj )= 


x e R 


k=l 


为经验分布函数 ， n > 1 (参阅第三章第 13 节).对 a : 6 M ， 令 


Yn{x) = F n (x] U)) - F ⑻， ^n{x) = <J (F n (x), ⑻，…）. 


证明，对任何 XGM , 序列 ( Y n ( x ), ^ n ( x )) n >1 都是逆鞅. 

20. 设 X = ( X n , ^ n ) n>Q 与 F = d ^ n ) n >0 为两个半鞅- 

( a ) 证明，序列 XVY ^( X n VY n , ^ n )^ o 仍然为半鞅. 

( b ) 试问，序列 


X + Y = ( X n + Y n , ^ n ) n>0 与 = ( X n y n , ^ n ) n ^0 


是否为半鞅？（如果“是”，那么在怎样的条件之下？如果“否”，那么为什么?） 

(C) 如果 X 与 Y 是两个鞅，或者叉与 y 是两个 上鞅， 再讨论上述问题. 

21. 设匕，&,…是 可交换随机变量的无限序列 (即对任何 n 彡1,随机向量（匕，…， 

60都与随机向量 （6 n ， . ■ U 同分布,其中 （ H , …，〜）是 （1, …， ri ) 的任意 
一种排列).令 E^i < 

作为第一章第11节例4中所讨论的内容的推广,证明， 


)， 


^n + l • 

n+1 ? • 


Sn =Cl + … + Cn ， 


oo 


=cr 


«• 


n 


S n 


1 


( P - a . s .)， n > 1， 


穿 n+l 


E 


n 


即序列（令， ^ n ) n >1 是逆鞅 ■ 

22. 证明，一切逆鞅都是一致可积的. 

23. 根据定义，马尔可夫时 t 的 a - 代数多 T 是集合类 {Ae ^ : An{r = n } e 

多 n ， 一切 n > 0}. 试问： 为何不将其定义为多 r a (^ n : n ^ r )? 

1 

24. 如果序列 X = ( X n , 久) 啦是鞅，而 （ n fc ) [ ( n ) 是某个子列，则 ( X nk , ^ Uh ) k>x 

仍然是鞅.试举例说明，一般来说，对 于局部 轶该结论未必成立. 


25. 在鞅论中，如果 n = ( n n ， ^ n ) n > 0 是一致可积的非负上鞅，并且逐点地有 

€ Q , 则称其为位势. 

证明，对于每个位势，都唯一存在可预报的非降序列 A =( 人， ^ n - l ) n >0, 


n n ( ai ) — 0, 


n — > oo , u ) 


使得 


n n — E (^4 oo - A n I 多 n ), n > 0, 


其中為 )= 0 ， cF-i = ^o- 
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26 .设叉 =( X n ， 多 n )_ 是 上鞅. 证明，如下各条件相互 等价： 

( i ) 存在半鞅序列 Y = ( y n , ^ nWo ； 使得对每个^ > 0,都有彡 Y n 


( P - a . s .), 


( ii ) 存在唯一 的里斯分解: 


X n = M n + U 


rij 


其中 M = ( M n , ^ n ) n ^ Q 是鞅，而 n = ( n „， ^ n ) n ^ 0 是位势的非负上鞅， 

27 •设 X = 多 是半鞅 • 证明,存在非负鞅 M = ( M n , 多 „) 心 Q ， 使得 


彡0和 sup = sup EM n • 


^ ^ M n , 


Tl 


n 


n 


提示： 利用 = ( X +, ^ n ) n ^ Q 也是半鞅的事实，并令 

M n = lim E (X+ +m l^n). 

m — ►oc 

设 （0, ，， P ) 是带有滤子 (^„) n ^0 的概率空间.设 f 与 T 是两个马尔可夫时， 
有 fj ( oj ) ^ t ( uj ), uj efl . 令 A = {w : a ( uj ) < n ^ r ( a ))}. 证明，对每个 n 彡 1，都 

有 A e ^ n - i . 换言之，序列 ( X n ) n ^ 是可预报的，其中 

1，如果 fj ( cj ) <n ^ t ( cj ), 

0,其他场合 


28. 




(即是 ^ n _ i 可测的， n 彡 1). 

29. (推广定理 2 )设 X 二 ( X n , ^ n ) n ^ o 是半鞅,具有杜布分解 X n 

其中 A ) = 0， 

< oo , 并且随机变量族 { m „, n > 0} 也一致可积. 

30. 设 M = ( M n , ^ n )^ o 是平方可积鞅.证明， 


+^ A n ，ti ^ 0, 


= m 


证明，如果随机变量族 n > 0} —致可积，则有 


m 0 




o* 


J 2 ^k ~ M k ^) 2 < 


2 


supEM 《 < oo 




oo . 


n 


k^l 


( UJ ) 是关于流 (^ n ) n ^ Q 的马尔可夫时.设/ = /( n ) 是定义在 
{0,1, 2 ，. ■ ■} 上的非降函数，有 /( n ) > n . 证明，涧二 /(♦)) 也是马尔可夫时. 

32•设 X = ( X n , ^ n ) 是关于测度 P 的鞅，而测度 Q 等价于测度 P ( Q 〜 P ). 试举 

例说明，关于 Q ， 序列 X = (1„， 武 0可能不是鞅 • 


e N = 


31. 设 


n 


33. 根据例5,如果叉= ( X n ， 多 n ) n ^ Q 是半鞅，而5 = 5(4 是非降的下凸函数,使 

>0,则序列 （ p ( x „), ^ n ) n > 0 仍然是半鞅.试举例说明，如 


得 E \ g ( X n )\ < 

果函数 P =咖）下凸，但不非降，则序列 ( g ( X n ), ^ n ) n ^ Q 不是半鞅. 


oo , n 
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§2. 在时间变置为随机时间时鞅性的不变性 


1. 证明，如果将定理1中的条件⑷换为如下条件，那么定理的结论可对半鞅序列 

成立： 


X+dP = 0. 


lim 


{r 2 >n} 


n—^oo 


提示: 证明过程本质上与定理 1 的证明相同，只是需要 指出： 既然彡 X + 
故有如下的不等式成立： 


X T2 dP > lim 


X n dP - 


x m dP 


Bn{r 2 彡 n} 


Sn { r 2 彡 


Bn { r 2> m } 


X n dP — iim 




Bn{r2>fn} 


Bn { r 2^ n } 


m—K5C 


2 •设 X = ( X n , ^ n ) n^Q 是平方可积鞅， T 是停时，且 EXq = 0, 


XldP = 0. 


lim 


{r>n} 


证明, 


eE ( a ') 2 ， 


EX ^ = E 〈 X ) 


i=Q 


其中， AXq = X 0 , AXj 二 Xj - j 彡 1. 

提示： 为证明不等式 


EX ^ E ^ AX ,-) 2 , 


j =0 


应当利用定理 1 和法图引理 （E Ito X ^ aN ^ lim EX ^ aN ). 为证明反过来的不 

等式，应当利用 


N—^oo 


N—oo 


tAN 


e 5]( A ^) 2 , 


ex t 2 > ex^ an 




j=Q 


以及法图引理. 

3. 证明，对任何鞅与任何非负半鞅 X = ( X „, ^ n ) n >0 , 以及任何停时 t , 都有 


E | X r | $ lim E \ X n • 


提示:注意 ㈤ 是半鞅，由定理1知,对一切 iV > 1，都有 E \ X rAN \ < e \ x n \. 
因此 iimEiX rAiv | ^ limE | X ^|, 再利用法图引理. 


N 


N 


I 
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4.设 X = ( X n , ^ n ) n >0 是上鞅 ，有 X n >E ⑹多 n ) ( P - a . s .), n > 0,其中 E |《| 
证明，如果 了1 与 t 2 是两个停时，满足条件 P{ti =$ t 2 } = 1,则有 


< oo . 


U E ( X T2 I 多 Vi ) ( P - a - s -). 


提示: 利用定理 1 的结果，验证在我们的题目中，有 E | X ri | < oo 和 E | X T2 | < 


以及 


00 , 


\ X n \dP = 0. 


lim 


{r 2 >n} 


5 •设6,6,…为相互独立的随机变量序列，有 P{a = 1} = P {6 = -1} = 1/2. 
而 a 与&为正数,有& > a .令 


X n = a 


fe=X 


k=l 


和 


r = inf {n ^ 1 : X n ( — r } 5 r > 0 ‘ 

证明，当入 < q ； q 时，有 Ee Ar < oo ; 当入〉 Ck 0 时，有 E 


其中 


At 


e 


== OO , 


2b 


2 a 


a 


In 


In 




cl h ct + 6 ct + 6 cl b 

6 .设匕，6,…为相互独立的随机变量序列，有 E & =： 0, ：= 

Cl + ** * + Cn , 巧= 7(心，… ,^ n ), n > 1. 证明对于沃尔德恒等式 （13) 和 （14) 
的如下 推广： 


^ s n = 


2 


<7: 


3 , 


如果 eEe |6 I 


贝 j E 5 r = 0; 


<00 


3 = 


如果 


mEs 2 T = Ej 2^ = ^ J 2 

i— 1 i—X 


2 


< OO, 


CT ： 


3 ， 


J =1 


7 •设 X =( 忍， ^ n ) n ^ 是平方可积鞅， T 是停时.证明， 




2 


EX 


再证明，如果 


lim E ( Xll ( r > n )) < 


或 lim E (\ X n \ I(r > n )) = 0 ? 


oo 


则 E ( AX r ) 2 二 E E ^ n - 

n=l 
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8.设 X = ( X n ，^ n ) n ^ 是半鞅 ， n <乃 < …是停时序列，使得 EX Tm 确定和 


lim E ( X ^ I ( r m ^ n )) = 0 ? m > L 


证明,序列 ( X Tm , 仍然为半鞅（如同往常， ^ r m = { Ae ^： An { r m = 

J > W - 

9 •设叉 =( X n ， ^ n ) n>0 为非负半鞅， TO ^ n < 是停时.证明，序列 （ X rTl ， 

^ rjn ^ l 仍为半鞅① • 


10. 作为更新理论的基本定理（见第2节第4小节）的补充，试证明，如果0 

Deri <00,则有 


< 


DN t 


a 3 D 


t — > DO 


CTl ， 


和中心极限定理 


N t — at 


伞⑻， 


P 


< x 


> oo 


VaFDoii 


成立，其中 ^^( Eai )- 1 . 

11. 设6,…为独立同分布随机变量序列.令& = ^ …+匕 ， n ^ 1 


= inf {n ^ 1 : S n > 0} 


(如果对一切71 > 1，都有& < 0,则如同往常 ; 令 T = OO ). 

证明,如果 E 6 = 0,则 E 


T = OO * 


12. 试利用第1节第18题中的序列 X = ^ k ) o ^ n 的鞅性质，和关于停时 

S k > a }, a >0 (如果对一切0 < A : < n , 都有兔< %贝!1 
n + l ) 的性质 EX q = EX ra , 证明如下不等式（参阅第四章第4节引 


丁 a = min {0 彡 fc 彡 


n : 


令 


— 


理 1) 


S k > a } ^ 2 P {5 n > a }. 


P 


max 


13. 作为定理 1 和 2 中命题的补充，试证明如下 结论: 设叉= ( X nj ^ n ) 是鞅， t 为 

停时 ( P{r < oo } = a )， 有 E | X r | < 


lim E [\ X n \ I ( r > n )] = ^ 则有 


OO, 


lim E [[ X r [/(r > n )] = 0, 

n—oo 

E \ X T — X rAn \ 


0, 


n oo 


和 EX r = EX 


o - 


$原书中为“序列 ( X Tn? ^ n ) n ^ l 仍然为半鞅” 


译者注 _ 
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14. (续定理1和 2 )设 n 与乃是两个有限停时，有 P{n < r2 } = 1,而 x = ( X n ) n>0 

是鞅. 证明，如果 


E sup | X n | < oo , 


(*) 


n ^ r 2 


则有 E ( X T2 | ^ Tl ) = X T1 ( P - a ， s .)‘ 

提示： 利用如下事实，在条件 （*) 之下，随机变量族 {\ X r2 
致可积的. 

15.设 r 是由例1中 （16) 式所定义的停时.证明，对一切 p > 1，都有 ErP < 


> 0} 是 


Afc 


OO. 


16. 试举例说明，存在鞅序列 X = ( X n ， ^ n ) n > Q 和停时 T , 满足如下条件（参阅定 


理 1): 


X n \dP = 0, 


lim 


{r>n} 


但是却没有 E | X r | < oo (意即 E | X r | = oo ). 

17. 设 M = ( M n ， ^ n ) n > o 是鞅，而 

oo ). 证明，鞅 Af —致可积，当且仅当 


inf {n 彡0 : \ M n \ > iV }, iV > 1 (inf 0 = 


tn 




limE | M T7V [/(riv < oo ) = 0, 


N 


18. (续例 1 和例 2) 设 ^ A , …是相互独立的对称伯努利随机变量序列（即有 

P{Ci = 1} = P {& = —1} = 1/2 ， i > 1). 我们来考察停时 r = inf {n > 0 : 
S n — 1}, 其中 Sq = 0, S n ~ + • * - + Cn , n 彡 1，且 inf 0 = 

( a ) 对 A e R , 令 


oo . 


AS 


e 


A 


n ( cliA)n • 

证明，对任何 AeE , 序列 （ A ) ❷ G 都 是鞅. 并利用这一事实，证明， P{t < oo }- 
1， Et = 00 ,且对于一切 A > 0,都有 

E ( chA ) 


— Ao 


=e 


(试比较 （18) 式). 

( b ) 令 ot = 1/ chA ， 由所得的公式知 


= > : a n P{T — n } ~ —(1 — \/1 — a 2 ). 

n 彡1 ^ 

(亦可参阅第八章第8节第26题由此得知 


Ea 


P{ T = 2 n - l } = {-\) n + l C ^ 


2, 


其中 


X(X 


+ 1 ) 


fl 


/"tn 

= 


n ! 































































































































第七章构成鞅的随机变最序列 


• 252 ■ 


(参阅第一章第2节第22题)， 

(c) ^ I = inf {S n : n ^ r}. 证明，对一切 彡 0, 都有 


P {/ ^ -k } = 


k-hl 


( d ) 令 t)c = inf {n > 0 : S n = 1 或 = — k }. 证明， 


S T ( P - a . s.) T k — oo , 但是 E 5 rfe y^ESr ( E 5 Tfc = 0 7 E 5 r = 1). 试说明“此处尽 
管有 S Tfc — & ( P - a , s .), k 


Tk T 


但是 BS rk 却不收敛到 ES r 的原因. 




— oo 


19. 在定理 2 和 3 的条件中包含有所考察的马尔可夫时 r 具有有限期望的假设（即 

Er < oo ). 试证明，若能找到整数 AT 和0 < e < 1，使得对一切 n 彡1，都有 


P{r ^ n + iV | ^ n } > e ( P - a * s .)， 


则有 E 


r < oo . 


提示： 用归纳法证明， 


P{r > kN } ^ ( l ~ e) k y k ^ l . 

20 .设 m ( t ) 为更新函数（参阅第 4 小节).初等更新理论 断言： m ( t)/t ^ l /^ t 一 

. 如下两个命题可以视为对这一断言的精确化. 

( a ) 如果更新过程 TV = (7 V *) oo 是 d - 格子点的（对于 d > 0,随机变量 n 的 
分布函数的支撑是集合 {0, d ，2 H )， 则有（柯尔莫戈洛夫， 1936) 


OO 


d 


E p {^ = Tidy ―> 


n — > oo * 






fc=i 


( b ) 如果更新过程 AT =： (N t ) t>0 对任何 ^>0, 都不是 d - 格子点的，那么对 
任何 /i > 0,都有（布莱克韦尔， 1948) 


h 


Y , P { t < T k ^ t -^ h } 


(*) 


n — oo. 


5 


k=l 


((*) 式的左端等于 m (6 + / i ) - m ⑴ .） 

提示: 为证 （ a ), 最好仔细研究第八章第 6 节定理2的证明. 

21•设 Cl ，^2, …为相互独立的随机变量序列，有 P{Ci = 1} = P , P {& = -1} = 

1 ， i 彡 1 .设工 , a， 6 都是整数，其中 a 彡 0 彡令 S n (x) = 工 + 匕十 •- 


A P+Q 


m 


和 


r a {x) = inf {n > 0 : S n (x) ^ a} 5 
T b (x) = inf {n > 0 : S n (x) > b}, 

Ta{x) = inf {n ^ 0 : S n (x ) 《 a 或 S n (x) ^ b}. 
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证明， 


如果 p 彡 g 且$ > a ， 


P { r a (^) < oo } = 


(p) 


，如果 p> q 且 工 > a ， 

如果 p > g 且 : r < 6, 


P{r b (x) < oo } 


b—x 




© 


，女口果 p < q S. x < b, 


P{t^(x) < oo } = 1 ， a $ x $ b. 


并且对于 a < x ❹，有 


( q / p) x - { q / p ) 


x — a 


—Cl 


b 


，如果 p 一 g ， 


^<{ x ) 


m 


q ~ p \{ q / p) b - { q / p ) 

Er ^( rc ) — (b - a)(x — a ), 如果 p 二 q 二 1/2. 


q ~ p 


22. 设&，6,…为独立同分布的随机变量序列，它们的取值集合为 {-1,0,1,-..}, 

且具有中位数 〆 < 0. 令* S 。 = 1, = 1 + Ci + • • + 6 m n > 1 及 t = inf {n > 

0 : = 0}. 证明， Et = 点. 


§3. _ 些基本不等式 

1 •设 X = ( X n , ^ n ) n >0 是非负半鞅， F = (K ， 多 n-l)n>0 是可预报序列- 
多 0 )，有0 < K+1 < W < c ( P - a . s .)， 其中 C 为常数.证明，可将不等式⑴推 
广为如下 形式： 对任何 A > 0,都有 


dP^J2 E V k AX k (△ 义 0 = 叉 0 ). 


XP \ o ^ J kXk>X \ + 


fc =0 


VkX k <X 




证明下 述克里克伯格 ( Krickbeg ) 分 解的正 确性： 任何满足条件 supE | X n | < 
的鞅 X = ( X n , ^ n ) n > 0 都可以表示为两个非负鞅的差. 

3.设 6,6,-** 为相互独立的随机变量序列.令& = 6 +…+ ^和 S m ， n 

E 证明如下的奥坦韦安尼 ( Ottaviani ) 不 等式： 


2 . 


OO 


j — m +1 


P {|^ n |>0 


\ Sj \ >2 t } ^ 


P 


t > 0. 


max 


漂 n P { HG } ’ 


再在条件 E & =0(0 1) 之下，由上式推出: 


\ Sj \ > 2 t } dt ^ 2 E |5 n |+2 


P {\ S n \> t}dt (*) 


P 


max 


2 E |& 


0 
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提示： 为证奥坦韦安尼不等式，应当令义= 


\ S k \>2 t 


max 


A k = {\Si\ < 2 t , i = 1, - 1； \S k \ > 2 t } ? l 


则有 4 E 瓜，并可断言，对 i > 0,有 


fe=i 


P(A) 忠 P { Hc } =( p ⑹ 十…+ 卩 ⑹） 


( P ( A x n {|5 n | > 0) + … + P ( A n n {|5 n | > t }) ^ P {|5 n | > 亡}‘ 
为证不等式 （*), 只需指出，在条件 E 心 -0( i > l ) 之下，有 


2EIH 


P { l^l > t } 


|5 j | >2 t } dt ^ 


dt + 


dt 


P 


max 


P {|^>| > t } 


max 


2 E |& 


0 


0 


以及在时，有 


P {|^>| >2 E |5 n |} 

彡 1 - max , 

2 E |5 n | 

4 •设 6^2,* ■* 为相互独立的随机变量序列，有 E & = 0. 试利用第3题中的不等 
式 （*)， 证明，可以将不等式 （ 10) 加强为 


P {\ S j > n \> t }^ l ~ 


max 


max 

l ^ j^n 


^ 1 -- 


2 2 




E 


max 

1 彡 Xn 


提示：应当利用上一'题中的不等式 (+). 

5. 试证明 （16) 式. 

6. 试证明不等式 (19). 

7•设為，…，多 n 为代数，有#0 [多1 [， n . 设事件戊 e k = 

试利用（ 22 )式证明如下的德沃里茨基 ( Dvoretzky ) 不等式：对 A > 0, 


V 


, n. 


* * 


有 


5] p (^| t r fc _ 1 )> A [>. 

因而有 

/( U 枭）.如果记 K = E p (為^丨多 fc - 1 )，则由 （ 22 ) 式，得 


U 枭 


p 


^ A + P 


fc=l 


fc=l 


提示：应当定义心= I { A k ), k = l r - 


J(Afc)= 




l ^ fc^n 


fc=l 


fc=l 


P{^N > 1} < E ( y n A £) + P { F n > £}, 


由此即可得出所要证明的不等式, 
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8 .设 X = ( X n ) n >1 是平方可积鞅， ( b n ) n >1 是非降的正数序列.证明如下的哈伊 

克-雷尼 （ Hajek - Renyi ) 不等式： 


E ( AX fc 2 ) 




X k 


， AXk = Xk — Xfc — 1 ， -^o = 0. 


P 


max — 

l^fc^n Ok 


bl 


9 .设 X = ( X n ) n >1 是半鞅，咖）是上升的非负下凸函数.证明，对任何正数/ I 和 
任何实数^都有 


Eg (/ iX n ) 

g { hx ). 


P < max Xk ^ x > ^ 

1 I 


特别地，有如下的杜布指数型不 等式: 


E e hX ^ ， 


… hx 


P < max Xk ^ x > ^ e 

1 1 


(试比较第四章第 2 节第 23 题中的柯尔莫戈洛夫指数型不等式 .） 

10. 设…是相互独立的随机变量序列，有迟心= 0, Eg = 1, n > 1.令 

其中 inf 0 = 

i=l } 

11. 设《 =( Cn ) n ^ l 是狹差序列， 1 < P ^ 2. 证明， 


证明， E —/ 2 < 


r = inf < n > 1 : 


oo . 


oo . 


p 


Esup ^ C p J 2^ i \ P ^ 

n >i i »—i 


其中 c p 是某个常数. 

设叉 = ( x k ) k >1 是鞅，有 EXfc = 0 , EXl < oo . (作为第四章第 2 节第5题中 

的不等式的推广）证明，对一切 n 彡1,都有 


12. 




P < max Xk ^ e } ^ 
I l ^ fc^n I 




e 2 + E #， 


13.设$1,^2, * ■ * 是相互独立的随机变量序列，有 P{Cn = 1} = p , P{Cn = —1} = 

q , p + q = 1, 0 < p < 1, 令 二0，5„ = ^1 + * ** + ^ n , n > 1. 

( a ) 证明，则序列 (( q / p ) S -) n > o 是鞅; 又如果 P < Q , 则有如下的最大值不等 


式: 


k 


| sup S n “}<(，) 


P 


(如果 p > g , 该不等式显然成立). 

( b ) 证明，如果 p < q , 则有 


P 


E sup 5 n ( 

n ^0 


< l~P 
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(C) 证明，上述两个不等式中的等号都是成立的，即当 P < g 时，随机变量 
sup 5 n 具有几何分布（参阅第二章第3节表 2): 


n 多0 


k 


p 


p 


P < sup S n = k 


， fc = 0 ， l ， 2 , …， 


Q 


Q 


P 


因而 E sup^n = 

n^O 


q~p 

14. 设 M = ( Mfc , 是鞅， M 。= 0,并且 — a * < AMk ^ 1- afc , k = 1, 

其中 AM k = M h - a fc e [0, 1]. 作为第四章第 5 节第 14 题中结论的推 

广,证明，对于一切0 < rc < g , 其中 q = 1 

成立： 




» * * 


長 E 叫，都有如下的不等式 


- p , p 




k=l 


P { M n > nx } ^ e _ (x) ， 


P +3 C 


q—x 


其中 ip { x ) — la 

提示: 参阅第四章第 5 节第14题提示，证明，在现在的情形下，有 


p+x 


殳一 CC 




hAM , 


hM 




iE (e 

- 1 ((i 

15. 设 M = ( M fc , ^ k ) k >0 是鞅，有 M g = 0,并且对非负常数 dfc 和 k ， 有 


Ee 


=E 


e 


)]. 


h ( l ~ an ) 


— ha 


hM 


— a n )e 


彡 E 


十 


Tl 


e 




其中 AMk = Mk — 抓―1， 

( a ) 证明，对一切 x ^ Q 和所有 n > 1, 都有 


2 x 2 


P { M n ^ x } ^ exp 


2 


X / ( a fc + 6 fc ) 


fc—1 


2 x 2 


P { M n 彡 — x } ^ exp 


Y1 i a k + h) 2 


k=l 


因此亦有 


2 


2 x 


P {| M n | > a :} < 2 exp 


+ & fc ) 


2 


fc=i 


(试比较第一章第 6 节和第四章第 5 节中的相应不等式 .) 
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( b ) 证明，如果对一切> 1，都有 
都有 a < AM fc ^ 6), 则有如下的最大值不 等式： 对/3 > 0和 a : > 0,都有 


a , h = b (此即意味着对一切^ > 1, 


afc 




8 x 0 


P { M n ~ pn ^ x 对某个 n } 彡 exp 


(*) 


(a + 6) 2 f , 


而对于 0>0 和整数 m > 1，都有 


2 


2 m )3 


P { M n > n ^ m } ^ exp < ― 


(a + 6) 2 J 5 

2 mp 2 I 
(a + 6) 2 j 


P { M n ^ - j 3 n n > m } ^ exp < - 


(试比较第四章第 5 节中的不等式 .） 

注：通常将⑷中的不等式称为霍夫丁-阿佐姆 （ Hoeffding - Azym ) 不等式， 

它的推广形式 （ b ) 在参考文献 [101] 中给出. 

提示：⑷对于任何 c > 0,都有 


P { M n ne cM ' 

^ V n = e cM -, 则有 K = 这就表明 

EiVnlM^^Vn-^ie 

通过对 n 迭代，并利用条件 - a fc 彡 AMk ( bk , 得到 


cAM 


l ^^ n —1)， 


-cb k 


JX ex p + ^ fc ) 2 | ， 


he 




+ ftfc 6 


n 


P { M n ^ xj ^ 


CX 


cx 


彡 e — 


江 fc + 


fc=l 


亦即 


(afc + 6 釦 ) 2 


E 


2 


P { M n ^ x } ^ exp < —cx + c 


8 


fc=l 


再由 c > 0 的任意性，即得 


2 


2 x 2 


(afc + 6 fc ) 


E 


2 


P { M n ^ x } ^ min exp 


~cx + c 


=exp 


8 


oo 


E (afc + 6fc) 2 


fc=l 


fc=l 


( b ) 为证 （*)， 需要引人变量 


V n = exp { c ( M n - 


/? n)}，n > 0, 

则序列 ( V ；)^1 形成非负上鞅，它对于任何有限的 


X — 


8 jS 


应当指出，若取 
马尔可夫时 t { K ) K ), 都有 


C = 


( a - ffe ) 


— 8x/3 / (ot+6) 


E V r ^ K ) ^ E Vo — e 
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令 t ( K ) — min {n : M n 彡 a : + 或 n = JRT }， 得到 


P { M t(K) ^ x + (3 r { K )} = P { V r{K) > 1} ^ EV r{K) ^ EV 0y 


亦即 


8 x 0 


P { M n > x + (3 n 对某个 w < K } < exp {— 


(a + 6) 2 广 

即得不等式由它按如下方式推导，可得进一步的不等式 (**)： 


令 K 


00 , 


mp n /3 


对某个 n } 


P { M n > pn 对某个 n > m }^ P ^ M n > 


2 


2 


2mp 2 1 
(a + &) 2 j • 


S ( m (3/2)((3/2) 


彡 exp 


> =exp 


(a + b ) 2 


16 •设 M = ( M n , ^ n ) n>0 是鞅，而 r = inf{n > 0 : | M n | > 入}，其中 A > 0 和 

inf 0 = oo . 证明， 


P{r < oo；K A 一 iMlU ， 


|| M||i = supE | M n |. 

17. 符号同上 i , 证明， 


J ] E | M fc - > k )^ 2|| M || i , 


k^O 


其中 ， M 

18 •设 M = ( M n , 多 n ) 岭。 是鞅，其中 M 。= 0 .令 AM k = M k - M k . ly [ M] n = 

f ： ( AMfc ) 2 , 记 [Ml = ([ M ] n? ^ n) n> U 并将其称为 M = ( Mn , ^ n ) n>0 的二次 

变型.证明，如下二条件 


= 0. 


-1 


k=l 


与 E [ M ] V 2 < 


E sup M n < oo 


OO 


是相互等 价的: 


e [ m ] L /2 


(*) 


E sup M n < oo 


< oo . 




(与此有关的还应提及伯克霍尔德-戴维斯-甘地不等式: 


〜 I [ mL /2 IIp ni| p < 巧 ||[M 以 2 




p ， 


| M „|， 戽与 均为仅与 P 有关的常数（参阅 (27), (30), 以及 


其中 

专著 [72]), 可将该不等式视为上面的不等式 （*) 的精确化 ') 


sup 
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19.设 M 二 （ Mfc ， ^ k ) k >1 是鞅.证明如下的 伯克霍尔德不 等式： 对任何 r > 2,存 

在仅依赖于 r 的常数使得 


r/2 


^ E (( AM fc ) 2 |^_!) 


E M n r < i 5 r < E 


+ E sup | AMfc | 


fc=l 


其中 AMfc = Mk — Mfc-ij A : 彡 1，而 Mo = 0. 

20. (矩不等式 I ) 设…是独立同分布的随机变量序列，有 E & = 0,且对某 

个 r > l ， 有£心「<00.令& = 6 +… + Cn ， n > 1. 则根据马钦凯维奇-济 
格蒙德不等式 （26) 的右半部，可以 得到： 


r/2 


E |5 n r 

\ i=l 


其中是某个仅依赖于 r 的常数. 

试运用关于 r > 2的闵可夫斯基 ( Minkowski ) 不等式（第二章第6节） 和 
关于 r < 2的 Cr 不等式（第二章第6节第72题)，证明， 




B r nE|^i| r , 

B r n r / 2 E | a | r 5 r > 2. 


1 ^ r ^ 2, 


E |5 n | r ^ 


(特别地，对于 r ^ 2,可由该式得到 


E|n- 1/2 5 n r^B r E|ei| r . 


根据①第三章第4节第22题，有 limEIn - 1 气 | r = E \ Z \ r , 其中 Z 〜 AT (0， a 2 ), 

= 时） " 

(矩不等式 II )设6, …是独立同分布的随机变量序列，& = 0, S n =心 +...+ 
心 n > 1.而 t 是一个关于滤子«)岭 0 的停时，其中為 s = {0，叫，< = 
a {* Si ， •■‘ ， S n }. 证明， 

( a ) 如果0 < r 彡1，且 E 心广 < oo , 贝 IJ 


2 


a 


21 . 


E |5 r | r ^ E | Ci | r Er . 


( b ) 如果 1 < r < 2,且 E^r < oo , E 6 = 0,贝! 1 


E \ S r \ r ^ B r E | ei | r Er . 


①原书此处有多处笔 误:将 “第三章，，错为“第二章，，，将 《 E |« - VWnr ” 错为 “ En - WjSnr ，， 将 

译者注 • 


limE |«— V 2 S„| r = E | Z | r ” 错为 — E |7|”，， 等等 
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丑心 =0 ，贝 0 


(C) 如果 r >2,且 Ehl 

E|5 r | r ^ B r [(ECi 2 ) r/2 Er r / 2 + E|^| r Er] ^ 2B r E|ei| r Er r / 2 


< oo , 


其中尽是仅与 r 有关的常数. 

提示: 在每种情况下，都应首先考虑“截尾的”(有限的）停时 r An (n > 1), 
然后再令 

22. 设&，…， Cn 是相互独立的随机变量，试证明如下形式的马钦凯维奇-济格蒙德 

不 等式： 对 r > 0和任何 n 彡1，都存在常数 B S ㈧ (试比较不等式 (26)), 使 


71 — 00, 




得 


2r 


1 E E i ^ i 2r * 




E 


j=i 


提示： 只需讨论整数 r > 1 的情形，该种情况下的证明较为简单. 

23•设 （ Cn ) r ^ i 是正交随机变量序列 ( E^Ci = 0, i 一 j ; Eg = 1，一切 i > 1). 证 

明，对于任意实数序列 (^)^ 1 , 都有如下的拉德马赫-梅尼绍夫 （ Rademacher - 
Men ’ shov ) 不等式成立：对任何 n > 1 


2 


k 


E 的 < ln2 ㈣ E 


2 


E max 


c : 


y 


i=i 


3 ― 


24 .设 ^ n ) n >1 是正交随机变量序列， ( Cn )^ 是实数序列，有 


< oo . 


fc=l 


贝！1级数5： 概率为1地收敛. 

提示^利用上题中的结论. 

25. (关于伯努利随机变量的极值作用 . I .)设6,… ， Cn 是相互独立的伯努利随机变 

量，有 Pte = 1} = p {& = - 1 } = 1 / 2 . 

( a ) 证明，由关于 p = 2 m , m > 1情形的辛钦不等式（那)(参阅《概率》第二 
卷 pl 37) 的右半部可以 推出： 对任何71 > 1，都有 


2 m 


2 m 


fc=l 

其中 X l5 -- - ? X n 是相互独立的标准正态 Af ( Q , 1) 随机变量. 

( b ) 以表示具有性质 D 足=1 ， i =： 1，…， n ， 的独立同分布的对称随机 
变量 Xx ,.-. , X n 的类.证明，对任何 n > l 和 m 彡1,都有 


E 


fc=l 


2 m 


2m 


a k^k 


E v 

江 fc Afc * 


^ inf E 

( x l5 …， Des n 


E 


fc=l 


fc=l 
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提示：⑷只需证明 


2m 


(2m)! 


E 


〉: a k^k 


2 fei .. 


2 k 


\ai 


E 




(2允1)! * … (2 fc n )! 


fciH - ki^O 


fc=l 


2 m 


ml 


(2m)! 


E 


Y ^ x k 


2 k 


2fci • 


E 


ai 


• • a 


k \! * * * kji ! 


2 m m! 


fciH — fci ^0 


fc=l 


h > 0 时，有 2 m h \ … fcnU (2 幻)!… (2 ‘)! . (注意， 
= (2 m - 1)!! - EX x 2 m , 参阅第二章第8节第9题 .） 

( b ) 当 m = 1时，所要证明的不等式显然成立.设 m > 2,此时#⑴ 

E b 1 2 m 是 t > 0 的凸函数，再通过对条件期望使用延森不等式,得到 


以及当 灸1 +…+ 

(2m)! 


m ， 




2 




2 m 


2 m 


〉 ： 〕 ^fcCfcl^fc 1 5 


E 


fc=i 


fc=i 


其中假定心，…‘与 A ，…，相互独立.最后只需注意 


(ClFll ， … dn|Xn|), (Xl, … ,X n ). 

26. (关于伯努利随机变置的极值作用 . IL ) 设 Xi ,... , X n 是相互独立的随机变量， 

有 P {0 < 不 <1} = 1， EXi = p h i = 1，…， n . 设6，... ， Cn 是独立同分布的 
伯努利随机变量，有 P {6 - 1} - P , P{Ci = 0} = 1 - p ， 其中 

明如下的本特古斯 （ Bentcus ) 不 等式： 对一切0,1，2,… 


PlH - bPn 


‘证 


P = 


P{Xi + * •• + X n ^ x } ^ eP{^i + . ■ * + 《n > i }， 


其中 e = 2.718 …， n > 1. 


§4. 半鞅和鞅收敛的基本定理 

1.设 (^ n ) n ^ l 是非升的 P 代数序列，负2為2…，爹 oc = 而 n 是某个可积 

的随机变量.证明如下的与定理3相类似的结 论：当 

E ( r ?|^) —E ⑴ |D ( P - a . s . 和 L 1 ). 

提示： 令 A 4 = E (??|%), 以 0 n [ a ， b ) 表示序列 M = (^4)设#“从上往下 
穿越区间 （ a ， b ) 的次数”.再令 ^ oo ( a , b ) = lim ^ n ( a , b ), 并证明 


时，有 


n — ^ oo 


E + | a | 


E /3 oo ( a ? b ) < 


< oo , 


b — a 


于是得知 ^ oc ( a ,6 )<oo ( P - a . s .)- 接下来的步骤与定理 1 和定理3的证明类似， 
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2.设…是独立同分布随机变量序列，有 E |^| < 00 和 E & = 
乂 =6+ *■• + &，证明（参阅第二章第7节第2题)， 


令 


m. 


S n 


E (6 I s n ，5 n+1 , ***) = E ( a |5 n ) = — ( P - a . s .) 


n 


并由前一题推出强大 数律： 当 


时，有 


n — > oo 


S n 


(Pu 和 L 1 ). 


> m 


n 


提示： 可以证明对每个 Bea { S n , S n+U …），都有 E / sCi - EI b ^ u i ^ 
由此即得 


n ， 


E {S n I S n ^ S n ^i 1 …） = nE d I S n , S n +i, …)， 

从而 E % |^ n , 5 n + i , .-•) - ^ ( P - a . s .). 为证 
引入 cr - 代数 ^{ S ) = 0 Cr (^ n , &+1, …)，由第 1 题的结论可以得到令 — 

E (^ i | f ⑹） （ P - a . s , 和 Z 1 ). 最后,再对 ^( S ) 中的事件4利用休伊特与塞维 
杰的 “0-1 律”(参阅第四章第1节定理 3). 

3. 如下的结果是共同使用勒贝格控制收敛定理与莱维定理的结果，试证明其正确 
性：设 ( Cn ) n>l 是随机变量序列，有 — € ( P - a . S .), |^ n | < T/，E T ? < 

rn > 1} 是非降的 ex - 族 ， ^00 = (7 (U 多 m ) •则 P a s . 地有 




( P -8 LS ■和 l 1 )，，， 需要 


> m 


而 


OOj 


lim E ( en |^ m )= E ( e |^ oc ). 


提示：写 


E(en|^m)~E(e|^oc) 

= [E(C n |#- m )-E(e|^ m )] + [E($|^ m )-E(e|^ 00 )], 


对充分大的 n 和 m ， 利用勒贝格控制收敛定理（第二章第6节定理 3) 估计上 
式右端第一个 括弧; 利用莱维定理（定理 3) 估计上式右端第二个括弧. 

4. 证明 （12) 式. 

提乐：对于所有关于1 = a (坧，… ， H n ) 可测的函数而言，函数族{巩 ㈤ ， 
… , H n ( x )} 是一组基.由于 I 中的成员数目有限，所以关于它可测的函数都 
是简单函数（第二章第4节引理3)，这表明带有有限个常数的，…，的 （12) 
式成立.于是由基 { Hi ( x ) r - , H n ( x )} 的正交性，知似=(/， fTfc ). 

5. 设 n = [0,1)，多=激([0,1))， P 为勒贝格测度，而/ = /⑷€ I 1 •令 


(A ； +l)2~ 


f ( y ) dy , 如果 k 2 ~ n ^ x <{ k + l )2~ n . 


fn(x) = 2 n 


k2- 
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证明， fn(x) ^ f{x) ( P - a . S .). 

提 示：令 A = a ([ J 2-, (j + 1)2—), j = 0,1，… 

骤是证明 (/ n (^), ^ n ) n ^ l 是鞅.接下来再利用定理 1. 

6. 设 n = [0, 1), 夢=涿 ([0,1)), p 为勒贝格测度，而/ = /⑷ e L 1 . 假定该函数 
在区间 [0,2) 上为周期函数，令 


-1). 证明中的关键步 


2 


2 


fn(x) = ^2- n f(x +Z2 - n ). 


证明， 


fn { x ) ^ f ( x ) ( P - a . s ,). 

提示： 定义与上题类似的^代数，并证明 ( f n ( x ). ^ n ) n ^ l 是鞅，再利用定 


理 1. 


7.设叉=(叉„， ^) n > l 为广义上鞅，即有 


inf sup E ( X ^ I ^ m ) < 00 ( P - a ^ s ,), 


n^m 


证明，定理 i 对于广义上鞅仍然成立. 

8.设 ( a n ) n >1 为某个数列，对所有满足条件 lt \ <6 } 6 > 0 的实数 t ， 都有极限 

存在.证明，极限 Jim a n 存在有限. 

"5|°°< (5, 存在”等价于“对一切 i e 都有极限 




ita 


lim e 


“极限 lim 

存在需证明，对某个常数 c , 可将极限函数 /⑷= jim 
表示为 e itc 的形式.为此,可以通过证明/⑷具有如下各条性质来实¥:°° 


ita 


提示: 


e 


ita 


ita 


lim 

n —>00 


e 


e 


( i ) 1/ ⑷ I 二 1 ， teR . 

( ii ) f(h + 1 2 ) = f ( h ) + /( t 2 ), h , t 2 eR . 

( iii ) f ( t ) 的连续点集在 M 中处处稠密. 

9 . 设 F = F ( x ), x € M , 是分布函数， 

我们来构造序列（罗宾斯-蒙罗 （ Robbhis - Monro ) 程序） X x , X 2) *** 如下: 


(0,1). 假设存在 OeR , 使得 F (0) = 


a G 


a. 


X n+ i = X n — n ~ 1 ( y „ - a ), Xo = 0, 


其中，…是随机变量，有 


如果1/ = 1, 
F (0), 如果 t / = 0, 




P{Fi = y } 


而对于 n > 1，则有 


如果1/ = 1， 


F ( X n ), 

1 — F { X n ), 如果 y = 0. 


P{Yn = y|Xl ， … ，足 i; ^1, • * * ,y n -l }= 
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证明“随机逼近论”中的如下 结果: 对于罗宾斯-蒙罗程序，有 E H 


2 


0, 


71 OO. 


10. 设 X = ( X n? #- n ) n> i 是半鞅,对任何停时 r ， 都有 E ( X T I(r < oo )) ^ oo . 证明， 

概率为1地存在极限 Um 


U ^nj - 证明，如果序列 （ Xn ) n>l —^致 

可积，则极限 Xoc = lixn A ( P - a . s .) 存妄，并且“闭，’序列 X = ( X n ， 

n—^oo 


11. 设 X = d ， 是鞅， 莎、 


= a 


是鞅 • 


12. 现在设 X = ( X m ^ n ) n ^ l 是半鞅，多 oo = 


U i ^nj -证明，如果序列 
( X +) n ^ 一致可积，则极限= lim ( P _ ai ) 存在，并且 “闭” 序列 


cr 


X = ( X n , ^ n ) 1<n<oc 是半鞅. 


13. 由定理 1 的推论1,可以 推出： 如果 X 是非负上鞅，则概率为1地存在有限极 

限 X % = Jim X n . 证明，由此还可以进一步推出如下各条 性质： 

( a ) E (Xoc I ^ n ) < X n ( P - a . s .), n ^ 1. 

( b ) 

( c ) 对任何 停兒： 与 a ， 都有 E ( m ) < X 命 

( d ) 对一切满足条件 

E 5 ( X n ). 

( e ) 如桌 iP 切 : r > 0,都有分 ㈤ > 5 ( 0 ) = 0,则有 


5 ㈤ 


的连续函数5 = 9{x), 怎 > 0,都有 


0, 


X ^ oo 


lim Eg { X n )^0. 


Xoo = 0 分 


( f ) 对任何给定的0 < p < 1，都有 


P{Xoo = 0} = 1 


lim EX ? = 0. 


< J => 


14. 在莱维定理（定理 3) 中假定了条件 E 旧 < oo 成立.试举例说明，为了使得 

E ( el ^ n ) — E ⑹，) ( P - a . s .), 可以仅要求 确定（意即有 min ( EC + , Er ) 

< oo ), 而不需假定 E |^| < 

15. 如果 X = ( X rl) ^ n ) n > l 是鞅，满足条件 su P E | X n | < oo , 则概率为1地存在（定 

理 1) 极限 Jim X n . 试举例说明，存在鞅虽然对其有 supE | X n | 

依然概率为1地存在着极限 lim 

n—>oo 

16. 试举例说明，存在鞅 （ W 如，对其有 X 

1 T . 对于一致可积的半鞅（上鞅 ）X = ( X „, (根据第 4 节定理 2 )存在“术 

语上的”随机变量 Xoo , 使得 X 
序列，对其有“术语上的”随机变量 X %存在,但是序列 ( X n ) n>1 却不是一致可 


oo . 


但却 


oo , 


— ex ), n —y oo . 


( P - SUS .). 试举例说明，存在半鞅（上鞅) 


X 


-1 
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积的. 


18. 证明，满足条件 


supE (| X n | ln + | X n |) < 


的鞅 X = ( X n ) n ^ 0 是莱维鞅. 

19. 试举例说明，存在非负鞅 X = ( X ni A ) n >1 , 对每个 n 彡1,都有 EX n = 1，而 

时，逐点地有 X n { to ) ^ 0,但是却有 E sup = 

n 

20. 设 X = ( X n ，^ n ) n >1 是一致可积的半鞅.证明，对于一切马尔可夫时 T ， 都有 


且当 


71—^00 


00 . 


E ( Xoq | # V ) ^ X T ( P - a . s *). 


(随机变量 X %就是，根据第 I 2 题，以概率1存在的极限 lim X n .) 

n 

21,(续定理 1) 试举例说明，存在半鞅 X = ( X n ， A ) n >1 ， 对其有 supE | X n | < cx ), 

因而概率为1地存在 lim (= X ^), 但是却有义 

n 

22 •设 M = ( M n , ^ n ) n >1 是平方可积鞅.证明，条件 

Ee(A4-MW) 


Y 

八 oo. 


2 


<00 


k^l 


(亦即条件 E { M ) 00 < oo , 其中 ( M ) 00 = lim ( M ) n ) 既可保证 M „ — ( P - a . s .), 

n 

又可保证 A 4 S M %， 其中 Mm 是某个满足条件 EMl<oo 的随机变量. 


23. 在定义半鞅 X = ( X n , Doo 时，假定了对一切 n > 0,都有 E | X n | 

实这一条件经常被削弱为 EX -< oo , n ^ O . 事实上，半鞅的许多性质在这个 

关于 X 


其 


< oo . 


彡0的可积性的削弱条件之下，仍然得以保持， 

试逐一检验第2〜4小节中所列举的半鞅的性质中，哪些性质在削弱后的 
可积性条件之下仍可成立. 


n 


24. 若 X = d ， ^ n ) n ^0 是上鞅 （BP A 为多 n 可测, E m < 00,且 E ( X n+1 \^ n ) 

^ X n , n ^ 0), 则根据定理1，在条件 supE | X n | < oo 之下，概率为 1 地存在极 

限 且 E | Xoo | < 

" 我们指出，半鞅条件 “E ( X „ +1 1 乂） d ” 即使在没有 “ E | X „ +1 | < oo ” 的 
假定条件之下也依然可以成立.数学期望 E ( X n+1 1 D ， 例如在条件 X n+ i > 0 
之下,就可以被确定,虽然其值可能为无穷. 

与此相关联的，如果对一切 n _ 0,都有 P { X n 彡 0} = 1及 E { X n+1 \^ n ) ^ 
X n ( P - a . s .), 则称此时的 X = { X ni ^ n ) n ^ 是非负上鞅 序列. 

证明，对于非负上鞅序列 X = ( X n , ^ n ) n ^ 概率为1地存在极限 
(= Xoo ). 并且如果 P { X 0 < oo } = 1,则有 < oo } — 1. 


00, 
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提示： 利用建立在关于相交数的第3节定理5中的 （37) 式基础上的定理1 


的证明. 


25. (续第二章第2节第15题）第二章第2节第15题曾经 指出： 关于 a - 代数的如 

下等式一般来说是不成 立的： 


门 a (^, £ n ) = o ■(贫，门 O . 


试证明，为了该等式能够成立，只需满足条件: 

对于一切 

AeW , Be A ， 都 （ P - a . s . 地）有 


1, a - 代数爹与 A 都关于 a - 代数 < 相对独立，亦即对 


n > 


V { A ( lB \£ n }^ P { A | ^ n } P { B \ 焱}. 


提示： 只需证明，对每个沒 V A 可测的有界随机变量 X ，都 （ P - a . s . 地）有 


VA) =E X| (贫 V 门 A). 


E X 


而为此，又只需对如下形式的随机变量证明这一结论: 


叉= X ! X 2 , 


其中 A 与 x 2 皆为有界随机变量，&为苟可测， x 2 为鬲可测. 

然后再利用已经证得的条件独立性及第1题中的 L 1 收敛性. 


26.设…是相互独立的非负随机变量序列，有 E & < 1和 P = 1} < 1①. 

时，有 A 4 — 0 ( P - a . s .). 


令 M n = U n ， n 彡 1. 证明，当 

提示：注意序列 ( M n ) n >1 是非负上鞅. 


n — ^ oo 


27•设⑴， (^)^ o , P ) 是可滤空间,其中為=川，外设…是随机变量序 

列,其中匕是罵可测的.假设有 supElef < oo , 其中 a € (1,2]. 证明， 


与 l 


E 沁 - Efe | 馬— J ) 


a.s. 


0 . 


(试比较第四章第3节中的强大数定律和第五章第3节中的遍历性定理 .) 


§5. 半鞅和鞅的收敛集 

1. 证明，如果半鞅 X = ( X n , ^ n ) n >1 满足条件 E sup | X n | < 00 ,则它属于 C + 类. 


①原书中为“有 eci 彡1和 p{ei = 1} < 1” 


译者注. 
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2. 证明，定理1和定理2对于广义半鞅仍然成立. 

3. 证明，对于广义半鞅， （ P - a . s . 地）成立如下 结论: 


inf sup E ( X + I D < 


c { X n - 


OO 


n^m 


4. 证明，定理 1 的推论对于广义半鞅仍然 成立. 

5. 证明， C + 类中的任何广义半鞅都是局部半鞅. 

6. 设 a „ > 0, n 彡1，令 〜 E a #；. 证明 ， E 


a 


< oo . 




k=l 


两种情况讨论 • 


提示：分 Ea n < oo 与 Ea n = 

n=l n—\ 

7 .设 &，6,6, …为一致有界的随机变量序列 ：H ^ c , n > 0. 证明，级数 E e 


OO 


n^O 


与级数 E E ( Cn | e 0 , ei ,-*-^ n - i ) 具有相同的 ( P - a . s .) 敛散性，即同为 ( P - a . s .) 

n>l 

收敛或同为 ( P - a . s .) 发散. 

8. 设又= ( X n ) n>0 是鞅，对某个 c < oo , 有 X n _i ^ c ( P - a . s .) ( AX 0 = 

X 0 ). 证明， （ P - a . s . 地）有 




{x n — ^ sup X n < oo }. 


9 •设 X = ( X n , 多 n ) n > Q 是鞅，满足条件 sup E | X n | 

n 

oo ( P - a . s .). (试比较第 3 节第 18 题 .） 

10. 设 X = ( X n , ^ n ) n ^0 是鞅，满足条件 E SUP | AX n | < 00. 证明， 


证明， E ( AXn ) 


< OO . 


< 


n^l 


n^l 


D △忍) 


2 


c { X n - 


<00 


n^l 


1/2 


< oo, 则序列 X = {X n ) n>0 概率为 1 地收敛 ■ 

11. 设 X = (X n； 爲是鞅，满足条件 SUp E|X n | < OO ； 而设 Y = (Y n )n^l 是可 

预报序列，满足条件 sup |F n | < oo (P-al). 证明，级数 E F.AX, (P-a.s.) 收 


特别地，如果 E 乙 ( AX n ) 


2 


n^l 


n^l 


n^l 


敛. 


12. 设 X = ( X n ，^ n ) n ^ o 是鞅，有 sup E (| AX r |/(r < oo )) < oo , 其中的上确界系对 

所有有限的正停时 r 所取.证明， 


E ( AX -) 


2 


Q ^ OO }. 


< OO 


n^l 
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13. 设 M = ( M n ， D 是平方可积鞅 • 证明，对集合 {{ M)oo = 00 } 中的几乎所有 


0， 


都有 


M n 


lim 


0- 


( M ) 


§6 - 概率测度在带滤子的可测空间上的绝对连续性和奇异性 


1. 试证明⑹式. 

2•设 P „ 〜 P „， n 彡 1. 证明 


P ~ P 


P{^oo < 00 } = P{^oo > 0} = 1， 

P{^OC 二 00 } = 1 或 P { 




PIP 


0} = 1, 




Z 


3. 设 P„ 《 P 


彡1，而 r 是（关于 （爲 0的）停时， P T = P |^ T 与 P T = P|^ T 
分别是测度 P 与 P 在。代 数多； 上的限制.证明，如果 {r = oo } = { Z(> 

00 } ( P - a . s .), 则有戶 T 《 P T . (特别地，如果 P{r < 00 } = 1，则有 ？ T « P T .) 


n 


< 


4. 试分别证明计数公式（叫和 (22). 

提示： 直接验证对任何 A €多 n - i ，都有 


E [ i^E (7? H -1)“—1] = E [lAfiZn . 

为证明第二个公式,应当 注意： P { z n _i = 0} = 0. 

5. 试证明不等式（ 2 8), (29) 和 (32). 

6. 试证明 （34) 式. 

7. 设第2小节中的序列€ = (6,6, … ） 与6石，…）均由独立同分布的随机 
变量构成. 

( a ) 证明，如果化《化，则?《 P ， 当且仅当，测度 々与 化相互重合. 

如果化《 P ei 且/ ，则 P 丄 P . 1 

( b ) 证明 ，若％ 〜 A , 则二者不可 兼得： 或者 P = P ， 或者 P±P (试比较 
定理3中的角谷“不可兼得说”). 

8•设 P 与乒都是可滤空间 （ n ， 多，上的概率测度.设 P 窆 P (即对所 
有 n 彡1，都有《 P „， 其中 P „ 二 P |^ n , P n = P | U 令 

证明，如果 t 是马尔可夫时,则在集合 {r < oo } 上 （ P - a . s . 地）有 


— n 

dP n ^ 


n ^ 1. 


= 


dP 


p T 《 p r 与 


垂― M 


dP 


I 

证明，亡《 P , 当且仅当，存在具有性质 P{lim r n - DO } = 1的上升的停时序列 
( r n ) n ^ i , 使得对每个 n 彡1，都有吞 Tri 《 pj 


9. 


I 
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10. 设 P 装 P ， 令〜= 


dP 


> 1. 证明， 


， n 


dP 


PVmfz ri >0 


11 . 设庐窆 p ， 令〜二 

证明下列各条件相互 等价: 


dPr , 


n 彡 1，多 oq = cr ( U ^)* 


dP 


( i ) Poo < Poo , 其中 ， Poo = PH ， 而 P 


PH 


( ii)p 


= 1 . 


sup Z n < OO 


致可积. 


( iii ) 鞅 （ z m D 

12 .设 （ n , 多， p ) 为概率空间，爹是多的可分的子 a - 代数，它是由夢的子集类 

{ G n ： n 彡 1} 所生成的.令劣，…， A ), 而轧是生成％的关于 fl 的 

最小分割. 


n^l 


设 Q 是 （ n ， 多）上的另一个概率测度.令 


Q ㈤ 


AM = E 


1 a {^) 


P ⑷ 


Ae^n 


(约定 0/0 = 0). 证明， 

( a ) 序列 ( X „， %)必是（关于 P 的）上鞅 ■ 

( b ) 如果 Q 《 P ， 则序列 （ X n ，%) n > i 是鞅 • 

(续上题）证明，如果 Q < P , 则存在爹可测的随机变量 X % = Xyo ;)， 使得 
X n ^ Xw X n = E ( X oc \^ n ) ( P - a . s .), 并且对于任何 Ae ^, 都有 


13. 


Q ⑷二 


义 ooCfP • 


A 


(本结论不是别的，它恰恰就是关于可分的子 a - 代数的拉东-尼科迪姆 
定理（第二章第6节 ).） 




… 是相互独立的非负随机变量序列，有 


(续角谷“不可兼得说”）设 

Ea i = 1•令 


14. 


«i^2r 

n ot k , ^0 = i - 证明， 




k=l 


( a ) 序列（‘) n >0 是（非负）鞅. 

( b ) 概率为1地存在极限 (= Zoo ). 

㈦ 下列各条件相互等价 ： n 

( i ) Bz 

( iv ) £(1- E ^)< 

n=l 


L 


( iii ) { Z n ) n ^ 为一致可积族 • 


( ii ) 之 n 


=1. 




( v ) n E > 0 . 

n—1 


(X). 
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§7. 随机游动越出曲线边界的概率的渐近式 

1. 证明，由⑷式所定义的序列是鞅.如果取消条件 K | ( P - a . S .), 1,那么 

结论是否还成立？ 

2. 试证明 （13) 式. 

提示： 只需将 E 砣表 示为： 


exp I 


2 


OLkik 


—a 


k 


2 


再利用随机变量心的正态 性％〜 #(0, 1)). 

3. 试证明 （17) 式. 

4. 设&，&，•••是独立同分布的随机变量序列,&=6+... +匕， n 彡1.对 


C > 0 


令 


T(^ 0 ) = inf {n 彡 1 : S n ^ 0} 3 r (>c) = inf {n ^ 1 : S n > c} 

(如同往常, inf 0 = oo). 证明， 

( a ) P { t (^ 0 ) < oo} = 1 分 P { limS n = 00 } = 1. 

( b ) ( ET (^ 0 ) < 00 ) 分（对一切 c > 0， Et ( >c ) < 00 ). 

5. 在上题的基础上，再定义 


inf {n 彡 1 : 5 n > 0 }， r _) = inf {n > 1 : S n ^ 0}, 

丁 (<o) = inf > 1 : *5^1 < 0}* 


r (>o) 


证明， 


与 Et (> q )= 


E 丁 


(> 0 ) — 


P ( r Ko) = W 


P { t (< o ) = oo } 

6 .设 a … 是独立同分布的随机变量序列，有 E | Ci | > 0. 令& = 6 
Cn , n > 1, 并设 

证明，如上所定义的马尔可夫时 T ^ Q > 与 T (<0 ) 都是有限的，并且概率为1 

地有 lim5 n = oo, Um5 n = —oo- 


+ * ■ * + 


p 


Sy%_ 


0. 


7. 在上题的条件下，证明，概率为1地有& 

其中巧= 46,…， Cn ) 的）停时了，使得 Er < OO 和 E & > 0. 

8 •设 （ a 多， (^ n ) n >0, P ) 是可滤的概率空间，令 


当且仅当，存在（关于流#二 


~> OO, 


hn — fin ^ ^ I5 


其中， Mn 与 & 是多 n —1 可测的， 

准正态 AT (0, 1) 随机变量序列.证明，序列&二（心， ^ n ) n > l 是条件高斯的，即 

Law (/ i n I ^ n - i ] P ) = U {^ n , o ^) ( P - a . s .). 


> 0. 而 $ = (&，^ n ) n>1 是相互独立的标 
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令 






， n ^ 1. 


Z n = exp 


2 


证明， 


( a ) 序列^ = ( Z n ) n ^ (关于测度 P ) 是鞅. 

(b) 如果 


法 ⑼ ] 


(即有 诺维可夫条件 成立) 


E exp 


< 00 


及 


^ 30 = GXp 


则 Zn = (^ n ) n ^ l 是一致可积軟，概率为1地存在 Zoo = Um Z n ,且= 

E(Zoo |#n), n ^ 1. 

9 .设褒 = a ( U ^ n ). 采用上题的记号，令 


P ( dw ) = Z ^ Piduj ). 


证明，如果 BZ 00 = l , 则条件分布 


Law (/ i n I P ) = AT (0， a :). 

( o ;) 与 o ; 无关，则 

Law(^ n I P ) = AT (0 5 a ^), 


如果进一步 ， <T 


2 


2 


a 


在此，随机变量 h ， h ， …是（关 于巧 相互独立的, 


，其中 if n = h +…+心 ， n ^ 1，而 /ifc = Mfc + 外匕，又 


H 


10 •设 

Mfe，J fc ，0 b & 彡 1, 均同第 8 题. 


e 


证明，如果 （ P - a . s . 地）有 




= 0 ， d 


Mfe + 


2 


W\ x = (x u , ^ n ) n> i 是鞅 • 

假设上述条件对某些 fc > i 不成立.令 


Mfc 4 


exp 


2 


crk 


假设 E ^ = 1,引入测度 


P(c^) = Z^Piduj), 
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并令多 = a ( UD . 

证明，关于测度？，序列 （ x ri ， 忒)必是鞅,其中 x n 


H 


e 


§8. 相依随机变霣之和的中心极限定理 


d 


巧，而 Cl J 0,证明，《71 


d 


+ Cn ， 打 > 1，其中 


1. 设^ 

2. 设 (^ n ( e )), n > 1, £ > 0,为随机变量族，对每个 
^⑷三 0. 试利用诸如第二章第10节第11题中的命题，证明，存在数列〜丄0, 
使得 Cn (^ n ) 0- 

提示：应当选取丨0,使得 


巧 n 


Vti 




0,当 


时’都有 


e > 


n — + oo 


P{|Cn(&)| >2 打 } 彡 2 一 ' n>l. 


3 .设 «), l ^ k ^ n , n > 1，是复值随机变量， （ P~a j 地）有 




a 


^71 


fc=l 


证明，当 


时， （ P - a . s •地）有 


n oo 




Ot 


e 


fc=i 


试证明关于定理 1 的注 2 中的命题. 

5. 试证明第4小节中所陈述的引理. 

6. 试证明定理3, 

7. 试证明定理 5. 

8. 设卜⑸ 

义序列^ : ( r ] n ) n ^ l 如下： 


4 




是独立同分布的随机变量序列，有= 0, < oo .定 


— oo < n<oo 


E 〜-石 ， E 


2 


< OO. 


巧 n — 


C j 


假设 


Dl = E(rn + -^rin) 


2 


— OO. 


证明 


+ • • • + T]n 




—t 


P 




e 


y 2 n 


D n 
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9.设 （1 T ， 多' P ") 是可滤概率空间， n > 1. 对每个 n > 1，都给定了 

一组随机变量 f 1 = ( Cfc ) l ^ rM 其中 G 是多 T 可测的. 

设 M 是 (X ^( E )) 上的无穷可分分布，具有特征函数 ( b ， c ， F ) (参阅第三 
章第6节第17题，其中^ 是连续的截断函数 .） 

证明，欲随机变量 Z n = f ：^ 的分布弱收敛到 m ， 只需如下各条件 成立： 


fc=l 


PL MU 二 0, s>o, 

E 〜， 

E ( E ， 2 ⑹ )iu 


sup 


P 


2 


(^ n [Hm \ ^-i}) 


l ^ k^n 


P 


E 


E 、 (a)IU 二 F ⑷， ge<5 u 




其中， c = c + J h 2 ( x ) F ( dx ), M 01 = { g } 是所有形如 g a ( x ) = ( a | x | - 1)+ 八 1 的 
函数的集合，其中 a 是有理数，又 F ( g ) = Jg ( x ) F ( dx ). 

10.设心,心，6,…是严平稳随机变量序列，有 E & = 0.令（参阅第六章第3节第 


5题) 


a k = sup | P(A C \ B )~ P ⑷ P (5)|， k > l , 


其中的上确界系对所有满足如下条件的集合 所取: 


A e = a (^ o ), B e = a ( Cfc ， Cfc + i ，. • * )• 


令 


1 [ 打 ( 


[6, 


vn 

Xt= ^/E 


t ^ O . 


k=l 


证明，如果对某个 p > 2, 强混合系数沁 fc , k ^ l } 满足条件 

ya ， 


v 


< oo 3 


fc>l 


的联合分布弱收敛 
其中 B = { B t ) t ^ o 是布朗桥， 


且对该趴有 E 1 Cg| p < oo , 则随机变量 X 
到随机向量（^仏 ，…， V ^ fc ) 的分布 A ， 
而 c 是如下形式的 常数： 


h ，… 


itk ? 


■ ■ ■ 


EC 0 2 + 2^EC 


2 


C = 


k . 


k^l 
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§9. 伊藤公式的离散版本 

1. 试证明 （15) 式. 

2. 在关于随机游动 S = ( S n ) n>0 的中心极限定理的基础上,证明 


2 


E |.9 n | 


— TI, 


71 00 . 


7T 


(试比较第一章第 9 节第 3 题中的提示 .） 

注：在第七章第 9 节例 2 中的 （17) 式和 （18) 式中的 1/2 tt 应当为 2/ tt , 

3. 试证明 （22) 式. 

4. (24) 式可对所有函数 FeC 2 成立,试证之. 

5. 试将 （11) 式推广到非齐次 d 维向量的场合，其中以分布函数 F { k , XI …， 对) 
取代 F { X k ). 

6. 设/ ⑻ = F ’( x ). 我们来考察等式 


n 


n 


F ( Xn ) = F ( Xo ) + J 2 f ( x k - i )^ X k + - f ( X k ^) AX k ) 


k~l 


fc=l 


尽管该式其貌不扬，它却可以视为离散时间场合下的一个换元公式（伊藤公式 
的离散版本). 


连续可微函数 P = F ( x ) 的伊藤换元公式 （(24) 式). 

7. 试将上题中的公式推广到非齐次 d 维向量的场合（以 F ( k , XI • • • , X ^) 取代 
F ⑽ • 

8. (续角谷公式的离散版本;参阅第一章第9节第3题）考察对称伯努利系统 （即: 
独立同分布的随机变量序列 Cl , 6, . •. ,有 P{Cn = 1}= P{Cn = -1} = 1/2, n > 
1)，令 = 0，=《1 + …+ 心， n > 1. x G Z = {0, ±1, ±2, … } ，记 


二 .0 ^ fe ^ Tl I — 


亦即满足等式汍和的整数的个数. 

证明角谷公式的如下离散版本 


71 


^sign ( S k -i 


\ S n — 


- x ) AS k + N n [ x ). 


X = X + 


fc=l 


注： 如果 S = ( B t ) t ^o 是布朗运动，则由著名的角谷公式知 


\ B t 


sign ( B s - x ) dB s + N t ( x ), 


x 
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其中 N t ( x ) 是区间 [0， t ] 中布朗运动处于水平 a : GE 的局部时.（莱维关于局部 
时 N t ( x ) 的定 义是： 


I {\ B S — x \ ^ s ) dx } 


N t ( x ) = lim 


eIQ 2s Jq 


可参阅，例如，文献 [12]，[97].) 


§10. 保险中破产概率的计算.鞅方法 

1. 证明， iv = ( N t ) t ^ (在假设 A 之下，参阅《概率》第二卷 P 201) 是独立增量过 


程. 


2. 证明 ，X = ( X t ) t ^ o 也是独立增量过程. 

3. 考察克拉默-林德伯格模型，并对 A , i = l ，2,... 为相互独立的几何分布随机变 

k ^ l ) 的情形陈述相应的定理. 

4. 设 JV =： { N t ) t ^ o 为由 （3) 式所定义的（以 A 为参数的）泊松过程.令0 = 

軻< 〈… < 0 ^ fci ^ fc 2 < • • - ^ fc n . 证明如下的“马氏 性”： 


fc_l 


量 （BP P{<Ti = k } = q 


P ， 


< 


= l} = P ^tn —l = - 1}* 


P { iVt fc = k n I N tl = A；i ，…， iVt 


5 .设 N = ( N t ) t ^ o 是标准 （ B 卩参数为 A = 1 的）泊松过程，而 A (0 是非降右连续 

( N m ) t ^ 并研究其性质（有限维分布，矩 


函数，有 A ⑼= 0,考察过程 N 


\ = 


O 


等等). 




6. 设防，…， T ；) 是泊松过程的前 n 个跳跃时刻，而 （X 

区间 [0, t ] 上的均匀分布随机变量， # n) ，. ** , X n 的秩序统计量 • 


- , X n ) 是相互独立的 


1 〆 • 


证明 


n ) = Law ( X[ n) r - ，处 ))， 

即随机向量 (T u .. 、 T n ) 在条件 N t = n 之下的条件分布与随机向量，…, 
X ^ n ) ) 的分布相同， 

7. 证明，对于泊松过程，当 s < t 时，有 


Law ( Ti , …， r n N t = 


C^(s/t) m (l - s/ty 1 一 ' m < n ， 


N t = n ) 


P ( N S 


m 






0, 


m > n . 


在初等概率论中就已经证明了：如果&与&是两个相互独立的随机变量，分 
别服从参数为\与 A 2 的泊松分布，则 A + X 2 是服从参数为 M + A 2 的泊松 
分布的随机变量.试证明其逆命题（拉伊可夫) :设 A 与 X 2 是两个相互独立的 
随机变量,使得 X 1+ X 2 服从泊松分布，则 A 与為 均服从泊松分布. 


8. 
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9.设 AT = ( N t J t>0 ，标准泊松过 f ， 0是与 N 独立的正值随机变量.我们来考察 
干扰过程及= ( Nt ) t ^ 其中反=证明这一过程的如下各种极限 性状： 

( a ) 强大数 定律： 


N t 


0 (P-3US *)， t ^ oo 


(参阅第四章第 3 节第 4 小节例 4). 

( b ) 中心极限 定理： 


N t - ❹ t 


少 ⑻， t 


p 


彡 X 


00 * 




( c ) 若0 < D 沒 < 00 ,则， 


N t - EN t O-EO 


① 


DN t 


10. 证明，等于给定的 w > 0, “破产函数 


^{ u ) = P < inf Xt 0? (= P{T < oo }) 


t^o 


可以表示为 


i >( u ) = P < SUpVn > 

In^l 


u 


其中 K = E(Ci 

再证 ai ， 1 第 10 节中用鞅方法所得到的估计式 iP ( u ) ^ e ~ Ru 可以用更为初 
等的方法推出.意即：如果记 ^ n ( u ) = P { max ^ k^nYk > u } , n > 1,则显然有 

. 余下再用数学归纳法即可得知，对一切 




1，都有 Hu )( 


-Ru 


蠄1 ⑻ 彡 

一 Ru 


n > 


e 


e 


11. 破产时刻的定义是 T = inf { t >0: 不彡0}，但有时也以 f = inf {^0: X t < 

0} 作为破产时刻.试分析，如果将 T 换为: f ， 那么第10节中的各种结果将会怎 
样变化？ 


12. 作为第2小节所引入的（齐次）泊松过程的推广，我们来 考察非齐次泊松过程 

N = ( N t ) t 》 0} 其定义为 




i^l 


其中乃=+ • • • + %随机变量％独立同分布， B 艮从如下 分布: 


P{<Ji ^ t } = 1 — exp 


X ( s)ds >， 




o 


©原书为： 




译者注 • 


vUe 
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在这里， A ⑷称为强 度函数 ，有 A ( t ) > 0, # X ( s)ds < oo 和/ 0 °° X ( s)ds = oo .证 

(/o Hs)ds^ 


明， 


k —1 


A ( s ) ds | 


E ex P 


P { N t < k } = P { T k > t } 




i \ 


f=0 


13. 设 iV 二 ( N t ) 聊 是非齐次泊松过程（参阅第 I 2 题)， ( en ) n ^0 是独立同分布的随 

机变量序列，且与过程 iV 独立.设 5 = g ( t ， x ) 是 E x 1 R 上的非负函数.证明如 
下的康贝 尔公式 


Ej2d( T n^n)I(Tn^t)^ / 

n=l ^0 


E [ 5 ( 5 , ^ i )] X ( s ) ds . 


14. 设 JV = ( N t ) t>0 是齐次泊松过程，爪 N t = ^ I ( T n t > 0, 而随机变 

量 ^ n+i — T n +i — T n (n ^ 0, To = 0) 独立同分布，有 


— Ax 


P {^ n+l ^ ~ ^ 


x ^ 0. 


令 U t = t - T N ” V t = T Nt +1 . 证明， 


— Xu 


—Xu 


P{U t < u, % 彡 ”} = [/{u>t} + - 

(特别地，由此可以 得知： 对于每个 t > 0,随机变量 c / t 与％都相互独立，并且 
F * 具有参数为 A 的泊松分布 ,） 试求概率 P { T 7 v t + i ~ T^ t > x }. 证明， P { T Nt ^ - 

Tjv t ^ 3^} ^ 

的分布弱收敛到两个相互独立的均服从参数为 A 的指数分布的随机变量之和 
的分布. 


) 1(1 


) 


e 


— e 


(- P { T n+1 - T n ^ x }). 并且证明，当 t 


— Ax 


时， TN t +i - Tn ± 


e 


- ^ OO 


§ 11 . 随机金融数学的基本定理.无套利的鞅特征 

1. 证明，当 iV = 1时，无套利条件等价于不等式 （18) 成立（假定 P { A 5 i = 0} < 1). 

2. 证明，在（第4小节）引理4的证明中用到了条件 (19). 

3. 证明，（第5小节）例1中的测度？是鞅测度,而且这在族 M ( P ) 中是唯一的. 

4. 试研究（第5小节）例2中所构造的鞅测度的唯一性. 

5. 证明，在（尽 S ) 模型中，假设 “| M ( P )| = 1”中包含了关于舍 （1 < n 彡 AT ) 的 

“两点条件”（第6小节). n 

6. 根据关于定理1的注1，如果 iV < oo 且 d < oo , 则有“第一基本定理”成立.试 
举例说明，如果 ei - oo , 则尽管无套利存在，鞅测度也未必存在. 

7. 作为定义1的补充中，我们说 （ B , 的-市场在弱 意义下 是无套利的，如果对一切 
“自融资组合” 7 T = (/?，7)，其中那= 0, M > 0 ( P - a . s .), n ^ N , 我们都有 
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X ^ = Q ( P - a . s .). 说 (尽 S )- 市场在强 意义下 是无套利的，如果对一切“自融资组 
合，，丌，其中 XS ^= O y m ( P - a . s .)， 我们都有 = 0 ( P - a . s .)， 0 < n < iV . 

设定理 1 中的假设成立.证明，如下各条件相互 等价： 

( i ) ( B , ■市场是无套利的. 

( ii ) ( B , 市场在弱意义下是无套利的. 

( iii ) ( B , S )- 市场在强意义下是无套利的. 

B . (如同在定理1中)，设 


是 P 鞅1 


S 


M ( P ) = < P 〜 P 


m 




B 


是所有鞅测度的集合， 


是 p 局部鞅1; 

M b ( P ) = f 〜 P :尹 e M ( P )， 且对某个常数 C ( P ), 


S 


Mi oc ( P ) = 


p 〜 p : 




B 


有 ( P - a . s .) 密度 票 (。；K C ( P )\ • 


证明，在定理1的条件下，如下各条件相互 等价: 


( i ) M ( P ) # 0， ( ii ) M ioc ( P ) 一 0， ( iii ) M b ( P ) 一 0. 


§12. 无套利模型中与“对冲”有关的核算 


1. 试对第 11 节第 5 小节例 2 中所考察的（尽 S)- 市场模型，求出带有炀= ( 知 - 
K ) + 的标准买入期权的价格 C ( f N ; P ). 

2. 请尝试证明 （ 10) 式的反向不等式. 

3. 试证明 （ 12) 式，并请尝试证明 （ 13) 式. 

4. 试给出 （ 23) 式的详细结论. 

5. 试证明 （ 25) 式与 （ 28) 式. 

6. 试给出 （32) 式的详细结论. 

7 . 在一步 CRR - 模型 


B % — 坎 》(1 + r )， S \ — So(l -h p ) 

中（参阅第 7 小节 （17) 式)，假定了 p 只取两个值 a 与6,且 - l < a < r <6 •我 
们现在假定 P 服从区间 k 上的均匀分布. 




§12. 无套利模型中与“对冲”有关的核算 


. 279 • 


证明，在这种情况下，上估计（私=常数) 


C (/; P ) - inf {x : XS = x ^ X ^ /(5o(l+p)) ; V p G [a, 6]}, 


其中 /(5 0 (l + p )) 是下凸的连续函数， /> e h 礼重合于 CRR - 模型（其中 P{p = 
b } P{p = a } = l - p , 0< p < l ) 的上估计(参阅 （19) 式，在其中令 iV = 1)， 
因而有 


/(5 0 (1 + 6)) , b 


/(So(l + a)) 


— r 


r — a 


C (/； P )= 

8. (关于布莱克-舒尔斯公式)作为离散（时间 ）（ S ， 斗市场，其中 B = ( B n ) Q ^ N , 

s = ( S n ) o^N (参阅《概率》第二卷 P 219 的推广，我们来考察连续（时间) 

{ B , *9) -市场，其中 B S — 且 


6 — OL 


—rt 


B t = B 0 e 


r > 0, Bo > 0 


和 


fit+aWt 


(*) 


S t = S Q e 


其中^ > 0, 而# = { W t ) o ^ T 是维纳过程（布朗运动). 

与买入期权支付函数 /tv = - K )+( 参阅《概率》第二卷 p 2 19 中的 （1) 

式）中类似，我们也认为在式中，有 


2 


a 


/i = r 


2 


试在该假设之下，证明， 

⑷序列（會 )0 供 T 是軟. 


⑼由 


It 


C (/ t ; P ) = B 0 E 


Bt 


所定义的相应于买入期权及顾客等的 C (/ T ; P ) 满足布莱克-舒尔斯 公式: 

Inf+T(r+ 誓） 


Inf + T ( r _ 誓) 


一 Ke ~ rT ^ 


C (/ T ; P ) = S 0 ^ 


Vt 


Vt 


<J 


a 


( ae 6 ^ 6 "/ 2 - K )^ } 其中 


提示 :对于 （ b )， 应当先证 C ( f T ； P ) 

S Q e rJ \ b = av ^ T , 而 €〜 Y (0,1). 然后通过计算直接证明 


^ tT 


e 


a 


a 


a 


ln k ^~2 h2 


Xn k ~2 h2 


2 


K 一 


K ) + = 


E (ae 


"2" 
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§13. 最优停止 问题. 鞅方法 


1. 证明，在第3小节引理的证明中所构造的随机变量 Mo ;) = sup U ^) 满足关于 
上确界存在性定义中的要求 a ) 与 b ). 

提示：在 0 ^ ilo 的情况下，考察 E max ⑻ w ), 


oteiio 


2. 证明，随机变量= tan €(岣(参阅第 3 小节引理证明的末尾）亦满足要求 a ) 


与 b ). 


3.设6,6, 是独立同分布的随机变量序列，有 E | ei | < oo . 我们来考察关于 

(Mf = {r : 1 彡 t < oo } 类中的）最佳停时问题： 


V 


sup E ( max ^ — cr 






令 r * = mf{n > 1 : ^ > ^},其中，是方程 E (^ - A *) = c 的唯一解 

(inf 0 = oo ). 证明，如果 P { r * < oo } = 1， 贝! I ，是使得 E ^max ^ - 

的所有停时 T 的类中的最佳停时. ^ 

再证明 F * = A *. 

4. 在本题和下一题中，采用如下记号： 


存在 


9 Dt ^ = {r : n 彡 r < oo }， 
= ess supE (/ T H )， 


F n °° = sup E/ r 

L 

r ^° = inf {fe > n : 


=/n}* 






假设 


E sup < oo , 


证明，对于极限随机变量 ® 


= Jim 

iV—►oo 


有如下各断言成立： 

( a ) 对于一切 r e 都有 


Vn ^ E(/ t |J^). 


( b ) 如果 Tf e 则有 


= E (/ r ^o I J^n), 

Vn = {= ess supE (/ T |^ n )). 

rem^ 

©随机变量 < 的定义参阅《概率》第二卷第七章第 13 节 ⑹式一 


译者注. 
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5. 设< e OTf . 试由上题中的断言 （ a ) 与 （ b ) 推出， rf 在如下意义下是最佳停 


时: 


supE (/ T | J ^) = E (/ ( P - a . s ，) 


ess 


rem 


及 


sup E/ r = E/ r oo 

■ * 

rem ^ 


亦即 F n °° = E / T oc . 

6 .设與多， P ) 为概率空间，而 S = {^( a ;); aeii } 是满足 条件： “对任何 aeiX , 
都有 E | G |< C ” 的随机变量族.假设 S 足够“丰富”，使得只要叱， e IX 与 
Ae ^, 则对任何 L G E , “ G S ， 都有 


( = Cai Ia + G 山 e 刃 . 


(此时我们说族 S 是“可以缝补”的 .） 对这样的族 S ， 令 


Q (^4) = sup E ^/ a , A e ^. 


证明， 


( a ) Q = Q ㈠ 是 a - 可加的集合函数. 

( b ) Q 《 P . 

( c ) 拉东-尼科迪姆导数 


dQ 


( P - a . s .). 


= ess sup 


(断言 （ c ) 可以视为对于“可以缝补”的随机变量族的本质上确界的存在性的证 


明 •) 


证明，如果将条件 “EH ^ C , a E il ,J 换为 "EC 
( a ), ( b ), ( c ) 仍可成立. 

7 •设 971= = {t : n ^ r < cx )}. 证明，如果 

丁 = t \ Ia + t 2 Ia 属于 

8 •设 （0, 多， (^ n ) n ^ O , P ) 为可滤概率空间， /„ 为多 n 可测的函数，有 E /~ 

0 , n > 0. 证明，随机变量族 ( E (/ r |^ n ); r G Tl ^} (对每个固定的 n > 0) 是 
可以缝补”的. 


e 1 T , 则断言 


< oo, a 


e 而 A e 多„，则有 


TU 丁 2 


< 


u 


































































































第八章形成马尔可夫链的随机变量序列 


§1. 定义和基本性质 


1. 试将关于定理1的证明中所建立的断言的证明分别作为本题的 a ， b ， c 小题（参 
阅第3小节). 

2. 证明，定理2中的函数 P n+ i{B~ X n {uj)) 关于 o ; 是多„可测的. 

3. 试由第二章第2节引理3中的断言推出性质 （ U ) 和 (12). 

4. 证明性质 （20) 和 （27). 

5. 证明关系式 （33). 

6. 证明第8小节末尾所陈述的断言 （ i )，( ii ) 和 （ iii ). 

7. 可否由马尔可夫性质 （3) 推出如下各 性质： . 

P{Zn+i 6 B | Xo 6 Bq, X\ G Bi, •■- , X n 6 B n } = P {X n ^-i G B \ X n G B n }, 


其中，执,执，… ，凡和 B 是# 中的集合，而 P { X 0 e Bo , e B u ... , X n G 
B n } > 0? 


8. 我们来观察一段圆柱状粉笔，其长度为 1. “随机地”将它折为两段.再“随机 
地”将左半段折为两段，并如此一直 下去. 将折了 n 次之后的左段的长度记为 
A ， 令多 n = C (义1,…， X n ). 则有 X 。= 1，而当 A = rr 时， X n+1 的条件分布 
是区间 [0, x ] 上的均匀分布 • 

证明，如此所得到的序列（1)心0是齐次马尔可夫链，并且对任何 a > -1， 


序列 


+ n^O 
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是非负鞅.证明，概率为1地对任何0 < p < e ，都有 


\ imp n X n - 0, 

n 


而对于 p > e } 则有 


limp n X n 


OO. 




(在随机折断中，平均来说，应当是对半分，由此通常会认为趋于0的速度 
应为 2-' 然而 \ imp n X n - 0 ( P - a . s .) 的结果却表明趋于0的速度要快得 

多，几乎达到 e - V .) 


9.设…为独立同分布的随机变量序列，有 P{^n = 1} — P{€n = -1} = 
1/2, n ^ 1( 伯努利序列).令 So = 0, S n = 4- * * • + M M n = 

fe < n }, n ^ 1. 

( a ) 试问: 序列 (\ S n \) 


{ S k ： 0 < 


max 


(| M 7 l j ) f ^与 （ M „ - S n ) n>0 是否构成马尔可夫 




链? 


( b ) 如果 Sq = X ^ 0, Sn = a ： + * • * + 那么上述三个序列是否构成马 

尔可夫链？ 

10 . 设 x = ( x n ) n >0 为马尔可夫链，相位空间为五= {-1,0,1}. i ^ p id > o 3 ij e e , 

试给出序列 (\ x n \) n ^ 0 构成马尔可夫链的充分必要条件. 

11. 试举出这样的 例子： 序列 X = ( X n ) n ^o 不是马尔可夫链，但是却满足柯尔莫戈 

洛夫4普曼方程. 

12•设叉 = ( X „) n 如是（广义）马尔可夫链，而 K = X n+1 - X n , n > 0. 证明， 

( X , Y ) = (( X n ) n ^ 0 , ( Y n ) n ^ o ) 仍然是马尔可夫链.试问，如下各序列是否是马 
尔可 夫链： ( X n , X n+1 ) n>0 , ( X 2 n ) n ^0 以及 X = ( X n+k ) n>0 , 其中 fc > 1? 

13. 设 A，n 彡0,是在可数空间五中取值的随机变量.称序列 X = ( X n ) n>0 构 

成 r 彡1阶的马尔可夫链，如果对一切《0, ... ， « n + i , 都有 


P{^n+l = 泛 n+1 义 0 = 《 0’ * • ’， 义 n = 《 n} 

= P{^n+1 ~ ^n+1 \^n 


n ~ ^ n }* 

令毛 = ( Un +1 ， … , X n+r _!), n >0. 证明，序列 X = ( X n ) n>0 形成通 
常的马尔可夫链（亦即 r = 1阶的马尔可夫链). 

(群上的随机游动）设 G 为定义有二元运算 © 的有限群.假设运算 ㊉ 满足通常 
的群性质： 

( i ) 如果 e G , 贝! ] a: ㊉ y € G . 

( ii ) 如果 x , y,ze G , UlI ㊉ （ y ㊉ 之 ）= (怎 ㊉ y) ㊉ 

( iii ) 存在单位元 e ， 使得对一切 xeG , 都有 x ㊉ 


一 r+1 = 落 n—r+1，• • ■ 


14 


之 • 


e /T^ /¥» — 

tr? x — x • 
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( iv ) 对于每个 x 6 G , 存在逆元素 — ; r ， 使得; r ㊉ (- x ) = (一 aO ㊉ 
设 L 6,…是取值于 G 的随机元序列①，月艮从相同的概率 Q ( g ) = P {^ = 
g}^ 9 n > 0. 

令 X n = Co ㊉ Cl ㊉ ，■㊉ 证明，随机游动 X = {^ n ) n ^0 形成马尔可夫链. 
并给出转移概率矩阵. 

15. (圆上的随机游动）设6,《2,…是独立同分布的取值于区间[0，1]的随机变量序 

列，具有连续的分布密度 fix ). 令序列 x = {x n ) n>0 , X 0 = xe [0,1) 和 


X 


e. 




X n = a : + Cl + • • • + Cn (mod 1). 


证明，序列 X = ( X n ) n>0 形成以 E = [0,1) 为状态空间的马尔可夫链.并求其 
转移函数. 

16. 设 X 二 ( X n ) n ^o 与 1" 二 (Vn)n >0 是定义在同一个概率空间队多， P ) 上的相 

互独立的两个马尔可夫链，取值于可数集合 E = 并具有相同的转移 

概率矩阵.令 Xo = % y 0 = 

证明，序列 ( X , Y ) = ( X n , Y n ) n>0 形成马尔可夫链.并求出其转移概率矩 


y- 


阵. 


17 .设 X !, X 2 , •■- 是独立同分布的非负随机变量序列，具有共同的连续分布函数. 

引入如下的 纪录时 序列： 


岛=1， Mk = inf {n > ^ k-i ' X n ^ max ( Xi , - - - , X n _ i )}, k ^ 2. 


证明，序列涿 = { M k ) k >1 形成马尔可夫链.并求出其转移概率矩阵. 

18. 设是取值于离散集合的独立同分布的非负随机变量序列，深 = 

是其记录时序列（参阅上题).令14 = &,，则 V = { V k ) k>1 是其记 
录值序列.证明 ， v = ( y fc ) fc ^ i 形成马尔可夫链.并求出其转移概率矩阵. 

19. (关于在时间的变换之下马尔可夫性的保持）设 X = ( X n ) 0 ^ N 是具有可数状 

态 空间丑 的不可约马尔可夫链，转移概率矩阵为/> =|| || 和不变初始分布 

q = ( qi ), 其中对任何 i e E ， 都有& > 0 (关于不变分布可参阅《概率》第二卷 

p 257). 


，则序列= ( X n ) 0 ^ N 是按时间 “ 反向的令 P = 
证明，戶是随机的，而且关于该矩阵，“反向”序列是具有 


令 U 

II 與 ill , 其中恥 
马尔可夫相依性（参阅定义 2) 的随机变量序列. 

注： 马尔可夫性的一种定义（参阅定理1之⑺） 说： 在给定“现在”的条件 

下，“将来”与“过去”是相互独立的.这种说法可以导致对按时间“反向的，’序 

列 X = { X n ) 0 ^ N 的性状的一种看法.由本题中的结果可以推出，如果以不变 


N-n 


Pji * 


® 此处似乎应当为相互独立的随机元序列——译者注. 
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分布作为初始分布，则“反向的”链仍然是马尔可夫链，但一般来说，转移概率 
矩阵是另外一个. 

20. (可逆马尔可夫链） 设 X = { X n ) n>0 是具有可数状态集合丑 的 马尔可夫链，具 

有移概率矩阵 P = \\ Pij \\ 和不变分布 g = to ). 称这样的 （ g , P ) 马尔可夫链 
@可逆的（例如，可参阅， [124]), 如果对任何 N 八 按时间为“反 向的” 序列 
XW = (元其中瓦 = X N—n ， 仍然是 ㈠ ， P ) 马尔可夫链. 

证明，不可约马尔可夫链是可逆的，当且仅当，对任何 i，j e 尽 都有： 


QiPij = QjPji * 


证明，如果分布 A 二 （AO (Ai > 0, E 人 =1) 和矩阵 P 满足平衡 条件： 对任何 
hj 6 E , 都有： 


^iPij = Xjpj“ 


则 A = ( AJ 重合于不变分布 q = (qi). 

21. 证明，在具有平稳分布屮 = CMV 2)' i = 0, l,...,N 的埃伦弗斯特模型（第8 

节第3小节）中，有上述的平衡条件 成立： 


QiPi,i+l = 乐十 lPi+l ， i- 


(注意，如果 |i - > 1，考察模型巧= o .) 

22. 设马尔可夫链 X 二 ( X n ) n>0 的转移概率矩阵为 


0 2/3 1/3 \ 

1/3 0 2/3 . 

2/3 1/3 0 / 

证明，它的不变分布为 g = (1/3, 1/3, 1/3). 证明，对于每个 JV > 1，序列 XW = 

都（关于 P 的转置矩阵 F ) 是马尔可夫的.证明 ，X = ( X n ) n>0 
却不是可逆的.试给出对于这一结果的直观解释. 


F = 


23. 设 X = ( X n ) r ^是 (严格意义下）平稳的非退化高斯序列.证明，该序列具有马 

尔可夫性，当且仅当，对于一切 n > 0 ， m > 0,协方差 cov ( X ra , X n+m ) 都具有 
如下 形式： 


{x ni X n+Tn ) - a 2 p m , 


COV 


其中 a 2 > 0, IpK 1. 


§2. 推广马尔可夫性和强马尔可夫性 

1. 证明，第1小节注中的函数 狀 x ) = Ej 是 f 可测的. 
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2. 证明性质 (12). 

3. 证明性质 (13). 

4. 第3小节例中的随机变量 - X TAn 与 X rAn 之间是否具有独立性？ 

5. 证明 （23) 式. 

6. 假设（状态）空间 E 为至多可数的，⑴，多）= ( E ' ^). 令 ‘： n 4 n 为移 
步算子， n > l : 对于…)，有 

O n {^) = (X n ，X„+i， …）， 

用 X =: ( X n ( a ;)) n ^ o 表本标准的投影过程，即对所有 n 彡0与 w = ( xo ^ xi , 

有 X n ( w ) = 

对于一切多-可测的函数丑= H { uj ), 我们令（参阅⑴） 


)’ 


傳嚶兽 


X 


n* 


(丑 O D ( w ) = H (6 n {( jj )), n > 1， 


而对于所有多-可测的集合 B , 则令（试比较第五章第1节定义 2) 


= { o ; : d n { oj ) eB }, n > l . 


试利用上述定义,证明如下各 性质: 
⑷对于 m 彡0 ， n > 1，有 


e n = x 


m + n ， 


亦即 

( b ) 对于 m ^ 0, n 彡1，有 

d eA } = {X 

亦即,对于所有4 #，有 


M , 




m+n 


^ ^4} — {Xm+n G A} 


m 


: e A } = { cu : ( X m O ^ n )( a ;) e A } = { u : X m + n ( a ;) G ^4}; 

并且，更加广义地有 

^n 1 {^0 G ^4o〆 • . ， G ^m} = {-^0 ° ^ ' * * , ° ^ ^m} 

= { x n e A 0 , • 

并且证明 


G ^4 m } • 


，X 


m m 


m+n 


d) = ad ， … ,X m+n ) 

(按照通常意义理解符号 6~\^) 与 a … ， ^ m + n )， 试给出相应的阐述). 


(*) 


I 
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7. 设孖= H ( UJ ) 为 多-可测的函数，义 e 涿 ( M ). 证明 

(if 吹)，“: 1 (孖 _1 ㈤ )， 

8. S r = t(uj) 为关于 {^ k ) k ^ 0 的停时,其中為 = c ( X 。，&，…， X *)(即有限马尔 
可夫时)，试利用第7题与第6题中的性质 （**) 与 （*), 证明,对于一切 n > 0,时 
刻 n + ro 8 n 仍为停时，亦即对一切 m > n , 都有 { a ; : n +( ro ^ n )( a ；) = m } G 

( a ;) 为停时 ，F = 嘲为 多-可测的函数，我们将（丑。 e a )( uj ) 理解为 
函数 H (8 a ^) ( a ?)), 即当 uj e { oj \ 0*(0；) = n } 时， 理解为变量 H {6 n { uj )). 

作为第8题的推广，证明 ， rr + t 。 6» ct 亦为停时. 

10. 与上题中关于 HoQ a 的定义相对应，对于停时 t 与 a , 我们将 X T oO a 理解为变 

量 X r (〜 ㈣ 队⑼)，即当 0 e {w : aM = n } 时，理解为变量 X r { enM ] (0 n ( u ;)). 

的推广,证明， 


(**) 


9. 设 


a = a 


作为第6题中性质 x m oe n = x 


m+n 


X T o 0 a = X to q 


+C7_ 


ll . 设集合 B e #，而 


^ b (^) = inf {n > 0 : X n { uj ) e B }， = inf {n > 0 : X n ( a ;) G B } 

为序列 X = { X n ) n >0 首次或零后首次属于集合 B 的时刻. 

我们认为，这两个时刻对于一切 a ; e S 7 都是有限的.再设7 = 7(^) 为停时. 

证明， TB 与印都是停时，并且 

7 + tbo ^ 7 = inf {n > 7 : ^n(^) 6 B}, 7 + ctb °^ 7 = inf {n > 7 : X n (a;) G B}. 

(这些关系式在变量 7 ， T^，CTB 取无限值时，仍然正确，此时集合 {•} 为空集.试 
给出一般情况下的相应定义和所涉及的关系式 .） 

12. 设 r 与 a 是马尔可夫时.证明 

上，约定^ = oo ). 

13. 证明，定理2中的严马尔可夫性⑺对于任何具有如下形式的马尔可夫时 r 彡 

仍然成立： 


1 + 0 ■也是马尔可夫时（在集合 {cr = oo } 


7 1/ = TO 


OO 


EJi^T < 00 )( 丑 o 0 T ) I = I(r < oo ) Kx t H ( PTr - a . s .) 

( H 为有界或非负的多-可测的 函数； 将 E Xt H 理解为随机变量 ^( X T ), 其中 

^f = E x H). 

证明，如果 K =欠(0；)为多 T 可测的函数， H 与 K 均有界或均非负，则对 
任何马尔可夫时 r < oo , 都有 

[⑺ r < oo ) K ) {H o 0 r )] = E n [{ I(r < oo ) K ) E Xt H \. 
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14. 证明，第3小节的例题中所考察的序列 x e E 是马尔可夫 

链.这一性质是否对于任何（具有可数状态空间的）马尔可夫链以及具有形式 
r = inf { n >0: X n G A } 的马尔可夫时都成立，其中 A Q £； ( 试比较 (15))? 

15. 设函数 H ( x ) = ( Uh )( x ) 是非负函数 /i =九⑷的位势（参阅附录第7节 p 337). 

证明， H ( x ) 是方程 V { x ) = / i(aO + ： TF (； r ) (在非负函数类 V = V { x ) 中的)最小解. 

16. 设 y。e 证明，格林函数 G { xH 是如下方程组的最小非负解： 

1 + TV ⑻， 

TV { x \ 

17. 证明，若 T 与 tx 是两个马尔可夫时，则对转移算子 T„，n > 0,有如下关系式成 


怎= y ， 


V ( x ) — 


x 笋 y °. 


立: 


TJT r = T a+Toe<T . 

提示：利用严马尔可夫性和第10题中的性质 X T 。I = X TO 0 
18* 设!集合 Z ) G S ，而 


+ GT. 


r ( D ) = : inf {n > 0 : X n G D } } ( t { D ) — inf {n > 0 : X n 6 D }. 


证明, 


^ a ( D ) = ^ t ( D ) o 9 1 在 { cr (_ D ) < OO } 上， 


T 


cr(D) 


19 .设 p > 0,而 Vd {x) = T T ( D ] g { x ). 证明， V D { x ) 是如下方程组的最小非 负解: 


9⑹ 


x G 

TV { x ), x ^ D , 


V ( x ) 




特别地，当 5 三 1 时，函数 Vd(x) = P x { r ( D ) < 00 } 是如下方程组的最小非负 


解: 


x eD } 


V { x ) = 


TV { x ) 




x 


20, 利用严马尔可夫性，证明，函数 m D ( x ) = E x t { D ) 满足如下的方程组: 


x £ 

鲁 

l+TTO )， x^D. 


0, 


V ( x ) 




再证明， m D ( x ) 是该方程组的最小非负解. 
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21.设/ = / ㈤ 是非负峰度函数.证明，该函数具有里斯 分解: 


f ( x ) — f ( x ) + Uh ( x ), 


其中 / Or ) 是调和函数 


/ ⑻ = lim ( T n /)( a ;), 


而 Uh ( x ) 则是位势函数 


M 怎 )= /W - Tf { x ). 

22. 设 X = ( X n ) n>1 与 F = { Y n ) n>1 是两个相互独立的马尔可夫链，具有相同的状 

态空间 E = {1,2} 与相同的转移概率矩阵 


1 — a 


a 


，其中 a , /3 E (0,1). 

inf { n >0: (若{，} = 0 ，则 T = oo ) 为“首次相遇”时刻.试 

求 t 的概率分布. 

23. 设 X = { X n , ^ n ) n >0 是某个随机序列， B e 涿⑻.根据例6, t b = inf{n > 

0 : e B } 与 erg = inf {n > 0 : X n e B } 都是马尔可 夫时. （始终认为 

inf 0 = 00 .) 证明，在例6中有 




令 


7 b — sup {0 ^ n $ JV : X n e B } 


(约定 sup 0 = 0)，其中， iV 是某个整数，而非马尔可夫时 * 

24. 证明，如果将函数孖= H [ oj ) 的有界性条件换为非负性，则定理 1( 以及定理 2) 

中的断言仍然成立. 

25. 设 X = ^ n ) n > 0 是马尔可夫序列， T 为有限马尔可夫时.令 


= ^ n + T } ^ n ~ 多 n 


+ T - 


证明，随机序列叉= @ n ， ^ n ) n > Q 仍为马尔可夫序列，并且具有与 X = (Xm 
^ n ) n > 0 相同的转移函数.（这一性质可以视为 严马尔可夫性的最简单形式 .） 

26.设 ( X 1} X 2 ,-..) 是独立同分布的随机变量序列，具有分布函数 F = F ( x ) .令 

多 0 = {0， D}，A = a ( X ir - , X n ), 1.设 t 是（关于（見)0。的）马尔可 

夫时，而 A 是 a - 代数七中的事件. 

如果 r 是有界的随机变量 （0 < t(uj) < T < 

( a ) 随机变量 Ja ， X 1+t , X 2+ t , --- 相互独 立. 

( b ) 每个随机变量 X n + T 都服从分布函数 F = F ( x )， 即有 Law ( X n+T ) = 

Law(Xi)，n ^ 1. 

(由性质⑷与 （ b ) 可以 推出： 随机变量序列 ( X 1+ Tj X 2+Tf •••) 的概率结 
构与序列 （ Xi ， x 2 , …） 的概率结构相同，即 Law ( X 1+r , X 2+T5 ..*) - Law ( X l5 


GO ), 证明， 


OO, UJ 
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X 2 , 这一性质可以视为随机变量序列 X = ( X n ) n >1 的概率性质在“时间 

的随机变换 

证明，对于任意的马尔可夫时 r (0< r < oo ) } 性质 （ a ) 转变为如下形式： 


之下得以保持 .) 


n ^ n 


P(A n {t < oo }; Xi +T Ti ， …， X n+T ^ X n ) = P(i4 n {t < oo }) Fi ( a :) * - - F n ( x ) 


(对一切 n > 1 与 a; n 6 成立). 

提示: 注意对于问题的解利用关系式 


P(^4 门〈 Oo}; 义1 +7* < 尤1， • • * ， ^n-\-T ^ ) 

oo 

义 1 +fc < 怎 1 ， • • ’ ， X n +k 《 工 n) 




fe =0 


其中，事件 A fl {r = fc } 与 { Xi+fc < 尤 1 ，…， x n+k < x n } 是相互独立的 • 


§3. 马尔可夫链的极限、遍历和平稳概率分布问题 


1. 试举例说明，存在这样的马尔可夫链，其极限7^ = limp ^ } 

( a ) 与初始状态 j 无关. n 

( b ) 依赖于初始状态久 

2. 分别举出具有遍历性的链与不具有遍历性的链的例子. 

3. 试举出平稳分布不是遍历的例子 


4. 试举出这样的转移概率矩阵的例子，对其任何状态空间上的概率分布都是平稳 


分布. 


§4. 马尔可夫链的状态按转移概率矩阵的代数性质分类 


1. 试对第1小节末尾所描述的关于非本质状态或本质状态的定义，补充给出以转 
移概率 pf , ijeE , n ^ l 的性质作为术语的数量公式. 

2. 设 P 是某个具有有限状态的不可约马尔可夫链的转移概率矩阵，有 P 2 = P . 试 

研究该矩阵 P 的结构. • 

3. 设 1 P 是有限马尔可夫链 X = { X n ) n >0 的转移概率矩阵.设 txi ， tr 2 , …是与 X 独 
立的非负整数值的独立同分布随机变量序列.令 r Q = 0, 

1,并令元= X Tn . 证明，序列 X = ( X n ) n >0 是马尔可 夫链. 试求其转移概率矩 
阵吞.并且证明，如果状态 i ， j 对于 X 是连通的，那么它们对于 X 也是连通的. 

4. 设 X = { X n ) n >0 是以 E = {0, 1} 为状态空间，以 P = 


01 + - - hCTnj n 》 


Tn 




1 — a 

1-/3 0 


a 


为转 
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移概率矩阵的马尔可夫链，其中 a ，/3 e ( o ， i ). 令马尔可夫时 


= inf {n ^ 1 : X n ^i = X n = 0}. 


证明， 


2 -( 斜 /3) 

a(l-/3) 

5. 我们来考察具有 3 个状态丑= {1,2,3} 和转移概率矩阵 


E 0 u = 


0 


1 — Ot 


a 


P = 


P 1-/3 


0 


0 


1 — 7 


7 


的马尔可夫链，其中^ (0,1). 证明，具有该种转移概率矩阵的马尔可夫 
链是不可约的.试讨论此类马尔可夫链的平稳分布问题. 

6. 试问，在如下两种情况下，马尔可夫链的所有状态可否都是非本质的？ 

( a ) 共有有限个状态. 

( b ) 共有可数个状态. 


§5. 马尔可夫链的状态按转移概率矩阵的渐近性质分类 

1. 考察以 0,1,2,... 为状态的不可约的链.证明，为了使其为非自返的，必须且只 

需，方程组 〜 = E ^ iPij ^ j = 有满足条件叫# const 的有界解，其中 

» 

i = 0,1，… • 

2 . 证明，为了使得以 0 , 1 , -. 为状态的不可约的链是自返的，只需存在序列（如， 

使得对一切0,都有％ 

t 

3. 证明，为了使得以 0,1,-.. 为状态的不可约的链是自返的和正的，必须且只需， 
方程组 

4. 设马尔可夫链具有状态0,1，…与转移 概率： 


) ，有叫 


—► OO, 怎 —> oo 


Uly 


• • * 


r 


•?_ = 0,1,…，有不恒等于 o 的解，其中 E W < 


OO * 


Uj 


Poo = H ]， = pQ > 0， 

: Pi > 0， j = i + 1， 




n >0， j = i , 


Pij ~ 


qi > o, j = i~ l, 


其佘清形. 


0, 
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令 


. 证明如下各 断言: 


qi … 9m 

Pl^pm 


PO = 1 ， Pm = 




链为自返的 
链为非自返的 




= 00 , 

Y^Pm < OO, 

Pm = 




E 


E 


链为自返与正的 


<=> 


< oo 


Pm Pm 


E 


E 


链为自返与零的 




pm ~ OO 


oo« 


PmPm 


5. 证明， 


fik ^ fijfjk 


< /〆 &i n) . 

n=l 

证明，对于任何具有可数状态集合的马尔可夫链， j4 n) 都存在 切萨罗 (Cesto>) 意 
义下的 极限： 


(n) 


sup pij 

n 


6 


■ 


lim — 

n n 




fc"-1 


7 .设 r/i， ％，…为独立同分布的随机变量序列，有 P { f]k = j } = Pj，j = 0,1，… . 
我们来考察马尔可夫链釦々，…，其中 心 +1 = (4) 

转移概率矩阵，并证明， 如果网 > 0, po + Pi < 1,则链为自返的，当且仅当， 
E^Pfc ^ !• 


A; ^ 0. 试写出它的 


Vk+l 


k 


8. 令内 = inf {n > 0 : = i} (cr‘ = 


如果 {.} = 0), of 

p 1 + (Ji 。 G ，如果 crj 1 
0, 如果 <rj 


且对 Tl 》1，令 


OO, 


= CTi 


—1 


< OO, 


n—1 


证明， 


Pi(cr? <oo} = (Pi{a, < oo})" {= f ^). 

9 •以 iV w 表示马尔可夫链访问状态 i 的次数. 

(a) 证明， 


Ei N^y = 


1 - Pi{(Ti < oo} 


(b) 运用术语 E, N { i } 改写关于状态 i e 五的自返性与非自返性的判别条 


件. 


(c) 证明 


Et N{iy = Pi{(7i < oo} - Ei N^iy. 
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10. (非自返的充分必要条件）设X = (X n ) n ^o 是具有可数状态集合五与转移概率 

矩阵 Ib^ll 的不可约马尔可夫链.证明,使得该链非自返的充分必要条件是：存 
在（非平凡的）有界函数/ = /⑻与状态/ e 尽使得 

f( x ) = S Pxyf(y)^ X^x° 


y 參怎 


(即在集合 E \{ x °} 上的调和性) • 

11. (非自返的充分条件）设X = ( X n ) n ^ 0 是具有可数状态集合五的不可约马尔可 

夫链.假设存在有界函数/ = /(x) 使得对某个 BQE ， 有 

f { x °) < f ( x ) 对某个 x ° e B 与一切 xeB 


和 


Pxyfjy) ^ /⑷， 


eB (- E \ B ) 


X 


y&E 


(在集合 B 上的上调和性). 

证明，该条件对于链的非自返性是充分的. 

12. (自返的充分条件）设X = ( X n ) n ^ 0 是具有可数状态集合五的不可约马尔可夫 

链.假设存在函数 /i = x ^ E , 使得对 一 切常数 c， 集合 B c = {x : h ( x ) < c } 

都是有限的，并且对于某个有限集合 a g 尽有 

p ^ v h ( y ) < H x ) 


G A 


X 


7 


yeE 


(在集合 3 (= E \ A ) 上的上调和性). 

证明，该链是自返的. 

13. 证明，上题中的条件也是必要的. 

14. 设 ( Un ^ l 是取值于 R 的独立同分布随机变量序列，X = ( X n ) n>0 为序列 

(Cn)n^l 所构成的随机游动： A = 0 ，不 l = Cl +…+ ^.以表示随机游 
动 X 访问博雷尔集合 B 的次数（亦即 iV B - E 而 U { B ) = EiVs 是 

n^O 

N b 的数学期望，在附录中（第7节 P337) 将这一测度称为（关于初始状态 T = 0 

的)位势测度. 

类似于对具有可数状态集合马尔可夫链的自返性与非自返性的定义（参阅 
第1小节中的定义1和定义2)，如果对于任何有限区间/ g R， 都有 


U(I) 




我们说随机游动（它当然是取值于肢的马尔可夫链）是自 返的； 如果对于任何 
有限区间 /CE, 都有 


U(I) < oo, 
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则随机游动是非自返的. 

以下假设数学期望 E & 确定. 

证明，必有如下三种情况之一 成立： 

1) X n — oo ( P - a . s .) 且随机游动非自返. 

2) X n — -oo ( P - a . s .) 且随机游动非自返. 

3) limXn = - oo , limX n = -f oo (即在 - oo 与 + oo 之间随机振荡)，此时既 

可能 自返; 也可能非自返. 


15. 在第 I 4 题中的条件下（记 m = E 6)， 证明， 

( P - a . s .), 


1) 若0 < M < 00 ,则 

2) 若 — oo 彡 /x < 0 ,则 X n —oo ( P - a . s .)* 

3) 若 /i = 0,则 limX n — 


— oo 


limX n = + oo , 且随机游动自返. 


16. 证明，随机游动 X = ( X n ) n ^ Q 是非自返的，当且仅当，概率为1地有 | X n 


―¥ 


cx ), n — ^ oo . 


17. 我们来考察这样的马尔可夫链 X = ( X n ) 

{0, 土1，士2,… } 满足 条件： 若 K — j | > 1，则内 i = 0,且在等式 


其转移概率 ij e E ^ 


n 彡0, 


+Pii -f Pt,i+1 = i ， 


中，三个加项均为正. 

证明，这样的链是不可约的和非周期的.试找出使得这样的链为自返的、非 
自返的、正的自返的、零的关于转移概率（如， Pi ^ i+u i e E ) 的条件（试 
比较第 4 题). 

提示:研究概率= P*{tjo = oo }, i €丑，所满足的结构关系式（对于每 
个固定的 r ). 

18. (关于高尔顿-沃森过程中所表述的概率）为了研究家族在英国的消失规律,高尔 

顿与沃森（于19世纪70年代）提出了如下的以他们的姓氏冠名的 模型： 

设 Co , Ci , 6, ••-为取值于集合 N = {0,1，2,… } 的随机变量序列，它们按照 
“随机个随机变量的和”的原则 定义： 


(试比较第一章第 I 2 节例 4.) 其中， { 4 n) , i ^ 1, n ^ 0} 是相互独立的随机 
变 I 族，其中每个随机变量都与随机变量 r ? 同分布，即有 P { r ? ^ h }= p k , 

0,史外=1•将心理解为第 n 代“父亲”的数目，而 r ? t ( n ) 为其中第 i 个“父 

亲“男孩”的数目.于是， 匕 +1 就是第 n + 1代全体“男孩”的数目.（如果 
Cn = 0,则认为对一切 k > n , 都有心= 0.) 

设 r = inf {n > 0 : = 0} 为该家族消失的时刻（如同往常,如果对一切 


Cn+1 = 7?i n) 


， n > 0. 


I 
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彡0,都有 Cn > 0,则认为 T = OO ), 由此所产生出的第一个问题 便是： 概率 


n 


q = P { r < oo }, 


即在有限时间内家族消失的概率是怎样的？ 

回答这个问题的最有力#方法是母函数方法（参阅第二章第6节第28题 

与附录第 3 节).令咖 ） =£以 ， M < 1，是取值0,1,2, ... 的随机变量 r ? 的 

fc=0 

母函数 (g(s) = Es ”)， 而 f n (s) = Es ^ 是随机变量 Cn 的母函数. 

证明，对于高尔顿-沃森模型 ，有： 

( a ) f n (s) = fn-l(g(S)) = fn- 2 (g(g(s )))= - 

(5。 …。 5) ⑷（复合 n 次). 

( b ) 若 Co = 1，则 fo(S) = s ， fn(s) g {n) (s) = ^(/n-l(5)). 

( c ) / n (0) = P«n = o }. 

⑷ 事件仏 -0 }c { Cn+1 = 0}. 

( e ) P{r < oo } = P f 0 {Cn = 0 } 

\ n=l 

( f ) 若 g = P{t < oo }， 则 g 是方程 x = 沒⑷的根，其中0彡 a ; 彡 1. 


fo ( 9 { n ) ( s )), 其 中，） - 


* * 


Jim P{Civ = 0} = Jim / jv ⑼. 

JV— ►OO N—OO 




19. (续第 18 题）设 〆 S ) = Es ” 是取值0,1，2,…的随机变量 r ? 的母函数.证明， 

( a ) g - g ( s ) 是区间 [ o ， i ] 中的非降下凸函数. 

( b ) 如果 P { r ? = 0} < 1 ， 则函数 P ⑷是严格上升的. 

( c ) 如果 P {? 7 彡 1} < 1，则函数分= ♦) 是严格凸的. 

( d ) 如果 P { t ? 彡 1} < 1且 Er ? 彡1，则方程 rr = g(x), 0 ^ x ^ 有唯一的 
根 g e [0, 1]. 


( e ) 如果 P { r ? O } < 1 且 Et ? > 1，则方程 x = g(x), 0 ^ x ^ 1 , 有两 个根: 

1 与 ge ( 0 ， l ). 

提示： 首先证明，对于 


X 


[0，1] 7 有 g ， (x) > 0与 g n {x) ^ 0. 为证明所陈述 
的断言，可以分别在 EtK 1与 Er ? > 1的情形下考察有界函数分= g ( x ). 


X G 


20. (续第18题与第19题）设在髙尔顿-沃森模型中有 Er ? > 1. 证明，此时家族消 

失的概率 q = P { T < oo } 是方程 : r = g (: r ) 的唯 一根, 该根严格地介于0与1之 
间，亦即 


0 < P{r < oo} < 1. 

而若 ErK 1且仍# 1,则家族消失的概率等于1，即 


Et ; > 1 




P{t < oo } = 1- 


Et ; ^ 1 


: 


设在髙尔顿-沃森模型中有扒 < 1, 证明，对于一切灸彡1，都有 P{^n = k i . O .} - 
0- 并由此断言 P 


21 . 


jlim^n € {0, cx )}| = 1. 
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22 .设 （ X n ) o G 是具有可数状态集合五= { i ， J ， … } 的马尔可 夫链. 证明，如果其所 

有状态都是非本质的,则该链为不可约的与自返的，当且 仅当： 

( a ) 对一切 i，j e 五，都有 / ij •二 1( 亦即 Pi { a ( j ) < oo } = 1,其中 < T ( J ) = 
inf {n > 0 : X n = j }). 

( b ) 每个峰态的有限非负函数 /i = h { i ), i € 五(即 / i ( i ) 彡 E PiMj)，i G E ， 


jeE 


其中 IIp ^- II 是链的转移概率矩阵)，都是常数. 

提示： （ b ) 的必要性证明见附录第7节 P 347, 为证充分性，只需对任何 
hjeE , 证明 


fij = Pij H - 5 ^Pikfk 


j ， 




并由此导出，如果峰态函数都是常数，则对一切 j e 丑， 都有 &=1， 再由⑷， 
知其等价于链的不可约性与自返性. 


§6. 7. 可数与有限马尔可夫链的极限分布、遍历分布和平稳分布 


1. 试考察具有下述转移概率矩阵的马尔可夫链的平稳、极限和遍历分布: 


1/2 


1/2 0 


0 


0 


0 


0 


p = 


1/4 1/2 1/4 0 

1/2 1/2 0 


0 


m 


2 •设 p = \\ Pij \\ 为有限二阶随机矩阵（即对$ = 1， 


•，饥 ，有 = 1;对= 

i =1 

有 Epu - 1)- 对于相应的马尔可夫链，其平稳分布是向量 Q 二 

t=l 


• * 


m 


1，-.. ? m ， 


(1/ m ， … ,1/ m ). 

&设 X = ( X n ) n ^ o 是具有两个状态的马尔可夫链,有 {0,1} 与转移概率矩阵 


1 — a 


a 


其中 0< a < l ， O <0<1. 


P 




证明 


1 (\- f 3 l-a 

2 - (a + P ) (1 — 01 
( b ) 若初始分布为 7 T = (7 r (0), 7 T (1))， 贝!1 


—(1 — a ) 

(1 —戸）1 — /3 


(a + 0~ l) n 


— a 


( a ) F n = 


2 — （a + 用 


— a 




R - U n 「霄⑻ 一 


1-0 


S Y — C\\ — 
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4. (续第3题）试求平稳分布 7 T 。， 并计算 


-^n+l) = E7r°^n^n-fl — Ett 。 E# JT n +i. 


cov 


o 


7 T 


证明，若 4 = ^ + … + x n ，则 


n(l — a ) 


且 < 


E ^ r 。 S n 


cn , 


(a + /3) 


2 


其中 c 为某个常数. 

再证明，（相对于测度 P 。， Pi 与 P n o ) 几乎必然地有 


Sn 


— a 


< 


2 -(a + /5)' 


n 


5. 设 P = ||^ || 是转移概率矩阵0 ， j e E 


{0, l ? 2,..-}), 对一切 i e 尽都有 




其中 0 < 於 < 1 ， i > 1，而 p 0 = 1. 

证明，具^有这样的转移概率矩阵的马尔可夫链的所有状态都是自返的，当 
且仅当 ， lim n = 0( 或，等价地有 f ：( l - Pj ) 

n i=i j=i 

证明，若所有状态都是自返的，则它们都是正自返的，当且仅当， 


~ Vi^ PiO = 1 


oo ). 


k 


oo 


En 巧 


< oo . 


k=lj=l 


6. 证明，若 X = ( X k ) k ^ 0 是不可约正自返的马尔可夫链，具有不变分布 V 。，则对 
所有固定 xgE ， (对于任何初始分布 tt ， 都 P ^- a . s . 地有） 


o 




— ^ 7T 


n — > oo , 




k =0 


与 


k=0 

(试比较第一章第12节中的大数定律 

再证明，如果马氏链是不可约的、自返的和零的，则对任何固定的 xeE , 
(对于任何初始分布 7 T , 都 p ^- a .8. 地有） 


任何 yeE . 


0 , 


Ti — ^^ OO, 


k =0 


与 


n — 1 


歹 ㉛ 一 0 , 


任何 yeE. 


n — > oo 
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7 • 设 （ X n ) n>0 是状态空间为有限集合丑 ={0, 1 ， … ， iV} 的马尔可夫链，且该链又 
是鞅 . 证明， 

(a) 状态 {0} 与 {iV} 为吸引态 （poo = Pnn — !)• 

(b) 若 t(x) = inf {n ^ 0 : X 


} ，则 ^x{r(N) < r(0)} = x/N. 


=X 


n 


§8. 作为马尔可夫链的简单随机游动 


1. 利用如下所述的概率方法证明斯特林公式 （ n! 〜 ，见 [10] 第 27.18 

题 ) : 令 二 Xi + . • • + X n ，n > 1, 其中 Xi ， X 2 , • • • 是独立的随机变量序列，服 
从参数为 A = 1 的泊松分布 . 依次证明， 


n 


n fc n n+l/ 2 e -n 

^Jn ) k\ 


S n — n 


n — 


E 


⑷ E 


— n 


=e 




n! 


k —0 


S n — 71 


(b) Law 


Law [i\T ]， 


y/n 


其中 iV 是正态分布的随机变量 . 


S n 


— n 


(c) E 


E [N ~]= 


\fn 


\/2n 


(d) n! 〜 y / 27r n n + 1 / 2 e -« 


2. 证明马尔可夫性 (28). 

3. 证明 （ 30) 式 . 

4. 证明，埃伦弗斯特模型中的马尔可夫链的所有状态都是自返的 . 

5. 验证 （ 31) 式与 （ 32) 式 . 


6. 证明，对于 Z 二 {0, 土 1 ，土 V..} 上的最简单的随机游动，即 

G Z, 是调和的 . 


Px } x + 1 = P) Px^x — l — 


X 


函数/⑻=(宁） 

为独立同分布的随机变量，令 & = 6 +…+ a, < n. 证明， 


1 - p ， 

7• 设 e 


，^ 


1， 


• * ■ 


d 


E 7 (^ > °) 


min{l ^ k ^ n : — max Sj } 7 


k^n 


其中，至表示同分布 . （斯帕尔 - 安德森的这一结果补充说明了，为什么在伯努利 
场合下，位于正半轴的时间与达到最大值的时间都服从相同的规律 
律 ; 试比较第一章第 10 节以及该节中的第 4 题与第 5 题 .） 

8. 设 … 为独立的伯努利随机变量序列，有 P{C n = 1} = P^n = -1} 


反正弦 
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1/2， n > L 令私 = 0，=《1 +…+ 心证明，若 t 为马尔可夫停时，且 


S n , 


n 》 r ， 


= S u /\t — (*^n — SnAT) = 


2 S 丁 一 S n ， 


n < t ， 


则有 (S n )n^o - (S n )n^ 亦即序列 (S n ) n ^ 0 的概率分布与序列 (S n ) n ^ 0 的概率 
分布重合 . （本结果称为关于对称简单随机游动 (S n ) n>0 的安德烈反射原理，试 
比较第一章第 10 节中关于反射原理的其他版本 

9. 设 X =( 足 0#0 是 d 维格子点集 Z d 上的简单随机游动，即有二 0, 


Xn = Cl + • • • + €n ， 几 > 1 ， 


其中 K2, … 是独立同分布的 d 维随机向量序列，有 


P{Ci = e} = 


2d ， 


= (ei 5 … ， ed ) 为 中的标准基向量，即 q = 0, — 1 ， 1 ，且 |e| 三 jei| + . • • |e<i| = 


e 


设 A 是中的以 0 = ((), •. ， () ）为球心的开球.证明多元中心极限定理 
的如下形式： 


d 


{^ eA } = L{^) 


2 




limP 


obi … dxd* 


2 


e 


n 


提示： 首先证明 6 的特征函数冰） =Ee 触 ) ， t 二 ⑷， … 山）为 p(t) = 
d- 1 f ： cos tj . 然后利用多维场合下的连续性定理（参阅第三章第 3 节定理 1); 

亦较第三章第 3 节第 5 题 . 


71—1 


10. 设 X = (X n ) n> Q 是上面第 9 题中的随机游动， N n = J ： I(X k = 0 ) 是使得 

1} 的个数 . 第七章第 9 节了，当 d =1 时，有 
( 《概率》第二卷第七章第 9 节 （ 1?) 与 （ 1S ) 式中的忐 


Xjc = 0 的 fc G {0,1，… 

EiV n 

均应为 f.) 

(a) 证明，对于 d^2, 有如下的关系式 成立 : 


n — 


7 


2 


-n, n oo. 


TV 


— Inn , d = 2, 


EiV n 


7T 


0 3, 


Cd ， 


其中常数 Cd = l/P{cTd : = oo }, 而 

). 试求常数 


=inf {A: > 0 : X k = 0} ( 如果 {.} = 0, 贝 ! J 


<Jd 




O^d 



































































































































第八章形成马尔可夫链的随机变置序列 


• 300 • 


( b ) 证明，当2时，有 


N n 


— 7 TX 


lim P 


， x > 0, 


彡 x 


= e 


Inn 


与 


7T 


P{(7i > n} = P{iV n = 0} 

时，有 


n oo. 


Inn ’ 


( c ) 证明，当 


,n —> oo 


P{x 2n = 0} 


P{cji = 2n} 


2 . 


1+ E Pfe = 0} 


k~l 


( d ) 证明，对任何 d > 1，都有 


P{cTl = oo} 


1+ E P {^2 fc = 0} 


fc — l 


注： 关于性质 （ d ) 的证明，已经本质上包含在第八章第5节定理1的证明之 
中.指出如下事实是有益的：由 （ d ) 中的等式,并注意到对于 d > 1及> 0, 

有 P{X 2k - 0} 


c(d) 


就立即可以得到波利亚定理的 结论: 对于 d = 1和 d = 2, 


d/2 7 


有 


P { CT ! < OO } 


(自返的概率为 1); 而对于 d > 3,有 


P{<Ji < oo} < 1 


(非自返的概率为正). 

我们来讨论关于区域 C ^ E 中的泊松方程的狄利克雷问题（参阅附录第7节 
P339, 其中£；为至多可数的 集合: 寻找非负函数 V = V(x), 使得 




11 . 


hV(x) = —h(x), x G C, 
V(x) = g(x) 


eD = E\C 、 


X 


其中与 〆 aO 为非负函数. 

证明,该问题的最小非负解 V D ( x ) 由下式所 定义: 


丁⑼一 1 

V D {x) = [l[r{D) < oo)g(X T{D) )] + I c (x)B x h(X k ) ， 


k—0 


其中， r(D) - iixf { n >0： X n G D } (如同往常，若 {•} = 0，则 r(D)=oo). 
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提示：写函数 Vd{x) = (Pd(x) 4- 如 ㈣ ，其中 （D = C): 


if D (x) = [I(r(D) < oo)g(X r{D) )], 

^ Pd ( x ) - h ( X d • 


k —0 


此二函数与 tPd (^) 分另! I 具有下述表达式: 


<Pd(x) = I D (x)g(x) 4- I^(x)T<p D (x) , 

^ d (^) — ^ d ( x ) H x ) +%(工)^00(工)， 


(其中 r 是一步转移 算子; 参阅附录第 7 节 p339). 由这些等式可以推出 


V D (x) = I D (x)g(x) + I^(x)[h(x) 4- TV D {x)], 


由此得知，在区域 C 7 上，这个函数是方程组的非负解，有 LV(x) = -h(x) : 而对 

则有 V(x)^g{x). 

为对方程组的任意非负解 V ( x ), 证明 V ( x ) ^ V D { xl 应当指出，对于这些 

解，有 V(x) - I D (x)g(x) + I^(x)[h(x) + TV(x)}, 由该关系式得知 


V(x) > I D (x)g{x) +%(x)/i(x). 


利用此不等式,通过归纳法，可证，对任何 n > 0,都有 


V(x)^J2( I D Tk )l I D9 + In^ 


k=0 


由此即得 




:/ D 沒 + I^h}(x) = ipo{x) + i)D(x) = V D (x). 


k ^0 


l 2 •设 X = ( Xn ) n > C ) 是鈔中的简单对称随机游动，而 


d 


<i(D) = inf {n > 0 : X n € D}^ D CX 


并且万 为有限集.证明，存在正常数 c = c(D) 与 

e D , 都有 


€(D) < 1,使得对一切 


€ 




X 


(cr(D) ^ n} < c£ n . 


(试比较第一章第 9 节中的不等式 (20).) 
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在概率空间⑴，多， P ) 上考察两个分别自 X 与 y 开始的相互独立的简单对称 
随机游动 X 1 = ( Xl ) n ^ o 与 X 2 = ( Xl) n ^ Q ( Xo 1 = X , X 0 2 = t /; a:， y € Z ) •令 

r 1 ( x ) = inf {n ^ 0 : = 0}, r 2 ( y ) — inf {n ^ 0 : = 0}. 试求概率 

证明，对于集合 Z = {0, 土1，土2,… } 上的简单对称随机游动 X = ( X n ) n ^ X 0 = 


13. 


14. 


0,有 


y 


jV -3/2 


Po { r ( y ) = N } 


N — oo 




y /2^ 


其中 T ( y ) = inf { n ^ O : X n ^ y }, y ^ 0. (试比较第二章第 4 节第 16 题中的断 


言 .) 


15. 我们来考察简单随机游动 X 二 （ X n ) n 列，其中 + - .+ Sn ， 而 a ^2 r ** 

是独立同分布的随机变量序列，有 P{^i = 1} = p ， P {6 = -1} = q, p + q = l , 

又 : c e Z ， 令 a ( x ) = inf {n > 0 : X n = x }. 证明， 


Px { cO ) < oo } = 2 min ( p ， q ). 


• , X n ( X Q =0 ) 中 


16. 考察上题中的随机游动，令 : c = 0•以家 1 表示序列 X 0j X 

的不同的值的个数.证明， 


1 〆 • 


深 n 


Eo 


n — ^ oo . 




n 


I 7 •设 X = ( X n ) n ^ Q 是集合 Z = {0，±1，土 2 ，...}上的简单随机游动，其中 X 0 = 

0 , 6 +…+ &，而心,…是独立同分布的随机变量序列，有 P{Ci = 

P{a = - l } = g (= l - p ), 0< P <1. 证明，序列 | X | = (\ X n \) n ^ o 是以 
E = {0, 1，2, • • • } 为状态空间的马尔可夫链，它的转移概率为： 


1 } 






p i+i+ 铲 +1 


i > 0^ poi = 1. 


^ 1- 


PM — 1， 


PM+1 二 


p 1 + q % 


都有 


再证明，对任何 n > 1及任何非负整数 h ii , •- 


y 1 




1 


P 


P ( X n ^ i \ \ X n \= i , | X n _ a | = i n ^ u , l ^ al - ii ) 




p l + q l 

设？二 （ Co ，€ l ，&， …）是独立同分布的随机变量序列，有 P {6 = 1} = P ， P{Cl 
—1} = A p + g = 1. 定义 X n = ^^ +1 ， n ^0. 试问，序列 X = ( X n ) n>Q 是否 

为马尔可夫链？如果令& = |(^- in 彡1，那么 Y = ( Y n ) n>l 是否为马 

尔可夫链？ 

19. 设 X 二 ( X n ) n >0 是 Z = {0, ±1，士 2 ,… } 上的简单对称随机游动，令 

是随机游动 X 回归状态0的时刻（其中為= 0). (即有 n - inf { n >0: X n 

0}, cr 2 = inf {n > o - ! : X n = 0}, 如此等等 .） 


18 






CTi ， CT2, • • * 






§8. 作为马尔可夫链的筒单随机游动 


• 303 • 


证明， 

( a ) Po{^i < 00 } = 1- 

( b ) P 0 { X 2n = 0} = E P 0 {<Jk = 2 n }. 

fe>l 

( c ) 矩母函数 E 0 2；q = ( E 0 ，f (| z | < 1). 

(d) EPo{x 2 „ = o K 

( e ) 母函数 E 0 W = i - vT ^2, 因此,结合⑷，得知 E Po {^ 2n = 0} z 2n = 

n ^0 


2n 




V 1 


2 


_ z 


( f ) BN ( k ) = 1, 其中是 Z 中的任一状态，但 _ 0,而 N ( k ) 是随机游动 
在第一次回归状态0 (即时刻州之前所访问状态的次数. 

20. 设 X = { X n ) n ^ 0 与 Y = (>；)_ 是 W 上的两个简单对称随机游动， d 彡1.令 


n 


71 


iin=EE 7 ^ = ^) - 


i=0 j=0 


证明，在 d = 1时，数学期望 ERn 是两个游动在时刻 n 时相交的平均次数的一 
个数字特征（包括多次经过同一个点的次数)，对于足够大的 n , 它的阶为 cn 3 / 2 , 
其中常数 c > 0. (现已知道，例如可以参阅[75]，对于不同的 d > 1，当 n 足够大 

时，分别有 


cn , d — 2; 

cy ^, d = 3; 


^Rn 


ckin ， d = 4; 


5, 


c 


是与 d 有关的常数.请尝试证明所列举的关于 Ei ^ 的各个渐近表 
达式，并求出常数 c d 的值 .） 

设 b 是 W 中的有限集，/ = /(岣为定义在 buob 上的函数，其中 aB 
{ x ^ B : || x - y || = 1对某个 y e B }. 假设函数 / = / ㈤ 在 B 中上调和（即 
Tf(x) ^ /⑷，： c e B ， 其中: T 为一步转移 算子; 参阅附录第7节 P 339). 证明， 
这样的函数满足 最大值 原理： 


其中， 


C = Crf 


21 




f { x ) = sup f(x). 


sup 

xeBUdB 


xEdB 


22 . 证明，一切在 z d 上调和的有界函数都是常数. 

23•设 C C p p ㈤ 为 3 C 上的有界函数.证明，问题 

G C, V { x ) = h(x), 


€ dC 


AV { x ) = 0, 


x 


X 
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的一切有界解 V = V ( x ) 均满足如下 等式: 


V 9 C ( x ) - E x [ g ( X ridc ) ) I ( r ( dC ) < 00 )] + aP { r { dC ) = oo }, 

其中， aeR , r { dC ) 二 inf {n > 0 : X n G dC }. 

所谓齐次狄利克雷问题，就是寻找函数 F = V ( xl 使得它在区域 C g 上调 
和 （ Ay (: r ) = 0， r G C ) ，在谷 C 上，有 V { x ) = g ( x ), 其中 p = p ( x ) 是给定的函 
数.证明关于该问题解的如下 结果： 

⑷若 d < 2 且函数 p g ㈤ 有界，则在有界函数类中，解存在、唯一，且 

满足等式 V dC ( x ) = E x g ( X r{dC) ). 

( b ) 若 d > 3,函 数沒二 沒 ㈤ 有界，且对任何 x eC , 都有 P { r (^ C ) < 00 } = 1, 
则在有界函数类中，解存在、唯 一， 且满足 （ a ) 中的等式. 

25. 设叉二 （ X n ) n ^ G 是上的简单对称随机游动， d ^ l . 证明，如果区域 CcZ d 

有界，并且其边界为集合 { xeZ d ： x ^ C , ||x iH = l 对某个 y e C }， 则 
狄利克雷问题： 

寻求 C U 上的函数 y = V ( x ), 使之满足 


24. 


AV ( x ) = — h ( x ) 7 
V ( x ) = g { x )^ x G dC 1 


G C ， 


就有由下式所给出的唯 一解: 


r(dC)-l 

V dC ( x )= E x g ( X ridC ) )+ E x Y 1 h ( Xk ) ，其中 I J 2 


r(dC) — l 


< OO. 


提示： 利用第 n 题提示中所述的方法，并注意,关于区域 c 的有界性假设 
蕴涵等式 Pz { r ( dC ) < 00 } =： 1, xeC (比照第11题) • 

26. 设= (^) 71 ^ 0 是 Z = {0, 士 1, 士2,，， . } 上的简单对称随机游动，有 So = 0， S n = 

^1 + * * * + Cn ， 其中 Cl ， $2,…是相互独立的伯努利随机变量，= 1} — P{Ci = 
-1} = 1/2•令 

法,证明了，对于 Ct < l , 有 


irxf { n ^0:5 n = l }. 第七章第2节第18题曾经运用鞅方 


[1 — \/\ — a 2 ]. 


Ea 


试以严马尔可夫性为基础，证明，函数 y >( a ) = EM 满足关系式 ^( a ) = § 

• a ( p 2 ( a ) , 并由此推出关于母函数 y ?( o ；) = Ea r 的表达式. 

27. 本题涉及由 T , 埃伦弗斯特和 R 埃伦弗斯特所提出的模型中的若干计算问题， 

该模型是用来解释玻尔兹曼热扩散动力学理论中的“不可逆性”与“自返性”之 
间的并不存在的矛盾的， 


+ 
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如所周知，产生于分子结构，并将热交换视为扩散随机过程的这一理论是 
由玻尔兹曼为解释热力学理论而提出来的（颇具#凡特色)，其中采纳了这样一 
个假设，即热扩散以不可逆的方式朝着热平衡的方向进行.尽管玻尔兹曼认为， 
在系统的状态中进行着热平衡的建立，并且朝着最大熵的状态运动，但在他所倡 
导的“随机”理论中并未排除，至少在理论上没有排除，这样的一种可能性，即 
随着时间的延续，系统可以回到自己最初的热力学非平衡态，而这正是人们对 
动力学理论进行批评的一个基本点.（庞加莱曾经对描述保测变换的动力系统指 
出过“自返14” 的可 能性; 参阅第五章第1节 

玻尔兹曼自己断言，在“不可逆性”与实际上是观察不到的“自返性”之间 
并不存在矛盾，因为在随机系统中，返回到肉眼可见的非平衡态是根本做不到 
的，而要发生这种情况，只有经过如此之长的时间，以致于我们根本不能见到这 
种状态. 


从物理学的观点来看，由两位埃伦弗斯特所建立的以马尔可夫链的语言所 
表述的模型，在刻画两个与外界环境隔绝的物体之间的热交换方面是非常成功 
的.它给出了由一个状态过渡到另一个状态的平均时间的审慎而有趣的数量分 


析. 


设 E = {0,1，…， 2 A :}， 其中状态 i 解释为“在箱子 A 中有 i 个分子”(关于 
埃伦弗斯特模型的更加详细的介绍，可以参阅《概率》第二卷 P 293). 分别以 


丁 ( i ) = inf {n 彡0 : X n — i }, a ( i ) = inf {n > 0 : X n = i } 


表示首次进入状态 i 或首次回到状态 i 的时刻，若知= i (如同往常 ， inf 0 = 00 ). 


证明 


( a ) Ew ⑷二 2 2 fc ^^, 特别地,返回状态0的平均时间为 E 0 a ⑼= 22fc . 

( b ) E fc r (0) 

( c ) E 0 r ( k ) = fclnfc + fc +0( l ) •(在 [19] 中有如下的数值计算:如果= 10000, 
并且分子间的交换每秒钟进行一次，则平均时间 Bo r ( k ) 少于29小时,然而,与 
此同时， E fc T ⑼却是一个天文 数字： 10 6 _ 年⑴ .） 


1 2 2fc (l + 0( fc )). 




2 k 




§ 9 . 马尔可夫链的最优停止问题 

1. 试举例说明，对于具有可数状态空间的马尔可夫链，有可能（在类中）不存 
在最优停时， 

2. 设％如定理2的证明中所定义.证明，巧是马尔可夫时. 

3. 证明，第7小节在“任性的未婚妻问题”中所引入的序列 X = ( H ") 形 
成齐次马尔可夫链. 

4•设 X = ( X n ) n ^ Q 为取值于 M 的齐次马尔可夫链，具有转移函数 P = P { x ; B ) 7 
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em , Be mm . 我们说 ，面 值的函数/ = / ㈤ ， xeM 是 调和的 （或者为 P - 调 
和的，或者关于同 P 之比为调和的)，如果有 

[ j /( y )| PO ; 姑 

Jm 

f f ( y ) P (^\ dy ), 

Jm 




X 


E x \ f ( X 1 )\ = 


x eR 


与 


/ ⑻ = 


W 




如果在式 （*) 中将等号“ =” 换为不等号 >”，则说/ 是上调和的 （参阅附录第 




7节) • 


证明，如果/是上调和函数，则对于所有的序列 ( f ( X n )) n ^ Q (其中 
X 0 = 0 ) 都是上鞅（关于同测度的比值). 


5. 证明， （40) 式中的时刻 f 属于 QJlf 5 类. 


6 . 对于第 8 节中的各种简单随机游动的例子，仿照第 6 小节例 1 ，讨论最优停时 


问题: 


S N ( x ) = sup E x g ( X T ) 


与 


S ( x ) = sup B x g ( X T ). 

7. (受控马尔可夫链与优化问题）给定一个转移概率矩阵的族 {P ⑷， ae A},M 
中沪⑷= \\ Pijia )]] 依赖于参数 a e A ， 而 A 是某个可视为所有可能“控制 
值”的返回值 集合. 相空间 E = { i , j , 有限或 可数. （所有取值于 A 的函数 
u = u { i ), i e M 均被理解为在状态 i e E 下的可允许的“控制 ”.） 

对于每个被选的控制 W = U { i ), i e E , 我们用 C 表示转移概率矩阵 
11 托如⑷) 11 ，根据其构造（例如，按照第二章第9节中 的约内斯库-图尔其定理) 
相应的序列空间丑°°中的概率分布族 i e 五，将其视为由状态 i 出发（即 
x 0 = 0 的（被“控制、所控制的）受控马尔可夫链 X = ( X n ) n ^ o 的概率分布, 

设 C 是 E 中的某个区域 ， D = E \ a 假设在 C 中给定了函数 h = 
h ( i , a ), i G C , aeA 与 5 = g { i , a ), i e D , a e A , 并且它们都是非负值函 


ft 


如果控制 


uii ), i € E 被选取出来，则令 h u { i ) = 啡,_))与 g u ( i )= 


u 




g ( hu { i )). 


与每个控制 w = u { i ), i e E 相关联的在状态 € E 下的“收入，，为: 


r(D)-l 

V U U) = ^ 9 u {X t{d] )I{t{D)<<x>) + h D 


k=o 
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其中 r ( D ) = inf {n > 0 : X n e D }. ( V u ( j ) 的含义是清 楚的： 这就是若选取开 
始于状态= j 的控制 u = u { i ), i e E , 所可以贏得的 钱数； 值 g u ( i ) 刻画了 
理论上的钱数，而 h u { i ) 则是在状态 i 下的现在的钱数 .） 

对于所考察的受控马尔可夫链的 最优化 问题就是寻找“价格” 


y *( j )- supy -( j ), jeE 


和最优控制 V = i € E , 如果它们存在. 

证明如下的所 谓检验定理：假设 

( i ) 存在函数 V = V { j ), j G E , 使得 


V ( j ) = sup l I ^( a ) V ( i ) + "( j ， a ) > , j G C , 

丑 J 


与 


V { j ) = sup g ( j , a ), j e D . 

a€：A 

( ii ) 在所考察的控制类中，存在控制 V = ^( i ), i G E , 使得对于每个固定 
的 j , 上述二式中的上确界均在 a = u \ j ) 处达到. 

则控制 V = u \ i ), i e E , 是最 优的： 对任何可允许的控制 ％ 都有 


V u ( j ) ^ V u ( j ) 且 V u ( j ) = V ( j ), j e E . 


提示： 利用 事实： 对任何控制 ％ 都有 


V ( j )^ T u V ( j ) + h u U ), jeC ， 其中 T u V ( j )= E ^ V ( X l ), 


与 


VU) > 9 U U), ieD, 

而对于控制 V , 则上述二式均成立等号. 

8 . (无序问题）在第六章第7节第 8 题中，曾经引入过 贝叶斯风险: 


iT ⑺二 P^{ T <0}+ cE 7r (r - 9) 


并且指出 ， inf iT (其中的下确界系对所有 Pi -有限的马尔可夫时 t 的类所 
取 ， （TT e [ 0 , 1 ])) 在如下的时刻达到： 


= inf {n ^ 0 : 7r n ^ A } 


w 


其中 A 是依赖于 c 与 p 的常数. 
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证明， 


( a ) 贝叶斯风险 R ^( t ) 具有如下表 达式: 


R n ( r ) = (1 - tt t ) + cl(r > l ) Y , 


附录本书所用到的组合论与概率论中的 

基本符号与重要概念简介 


( b ) 在关于马尔可夫链 (7 T n ) n>Q 的最优停时问题 


DE 


R w ( r )= inf ^ (1 - tt t ) + c/(r ^ 


中，由 （*) 所确定的停时 T * 是最优的. 


§1. 组合论基础 


“概率计算”从一开始就与组合学密切联系在 一起， 因为它需要用组合方法计算 
使得所考察的事件发生的可能情况的数目.这些方法即使在现代概率论中也依然占 
据着显著的地位，尤其是在那些具有有限个试验结果的场合（《初等概率论》) . 组合 
方法构成了离散数学，包括它的各个分支,诸如图论，算法理论等等中的最本质的部 


分. 


我们来大致介绍一下组合学的某些基本概念及其结果，这些内容曾经在《概率》 
第 一 、二卷的基本内容以及本习题集中被运用到. 

•设 A 是具有有限个元素 
那么就将4称为集合，并记作 


的组 （14 = 7 V ). 如果这些元素各不相同, 


ai, …, flAT 


A = {❼，… ,a N }， 


在这里，元素的书写顺序是无关紧要的，重要的是其中究竟有哪些成员.因而， 
组 {1,2,3} 与组 {2,3,1} 所确定的是同一个由“点”{1},{ 2 }与 {3} 所构成的集 


合. 


与每个集合 A = { ai ，, aAr } 联系着两种不同类型的大小为 n 的样本（有 
时也称为长度为 n 的序列)： 


) 与 [ a h ，…，，? 


( a “ ，… 
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其中《1 ，…， in G {1，… , iV }, 而元素％ e A , 并且对于不同的 j 
此相同 • 


有可能彼 


， a ij 


用符号（％，… , a in ) 表示有序样本,即元素的排列顺序是关键因素的样本. 

用符号[%， • ， 

它们的排列顺序的样本. 

如此一来，样本 ( a 4 , a 1 , a 3) a 1 ) 与样本（^,&， a 4 , a 3 ) 尽管组成成员相同, ( 但 
排列顺序不同，因而是互不相同的.而 [ a 4 , ai , a 3 , ai ] 与 a 4 , a 3 ] 则视为同 
一个样本. 

如果与卜 . 」是由 A 按“无放回抽样”所形成的样本，则它们中的所 
有成员各不相同，因而 n ^ N , 

在‘‘有放回抽样”的情况下，（…）与[…]中的成员可以重复出现，因而 
可以任意大. 

设 A 为集合，有 W = iV . 如果子集 Di C A , 1 ^ i ^ n , 满足条件 
Di ^0, DiHD ^ 0, i 兴 j 且 £^ + ..+2^ = A ，贝4将货 = {1^ ，… ， D n } 称 
为 A 的一个 分割， n ^ N . 集合 A 称为 分割贫的原子或分割类. 


] 表示无序样本，即只关心其中的成员有哪些，而不计较 


1 


71 


A = { a ir - , a N } 的元素构成的样本数目的计算. 

组合计数 

( a ) ( N) n = N(N - l ).--( iV-n + l ) 

(由 iV 个元素中选出 n 个的排列数目， 

1 ^ n ^ iV ) 

( b ) d 

(由 iV 个元素中选出 n 个的组合数目， 

二项式系数） 


意义 


A 为集合，有 jA | = iV . 由>1中的元素 
按“无放回抽样”所形成的大小为 
的有序样本的数目 

A 为集合，有 |Aj = iV . 由 A 中的元素 

按“无放回抽样”所形成的大小为 
的无序样本丨…]的数目 

A 为集合,有 | A | = iV . 由 A 中的元素 
按“有放回抽样”所形成的大小为 
的有序样本 （_••) 的数目 

A 为集合，有 jAl = N . 由 A 中的元素 
按“有放回抽样”所形成的大小为 
的无序样本 […] 的数目 


71 


( Nn ) 


n!(iV—n)! 


n! 


n 


( C ) N 


n 


(d) 


十 71—1 


n 


关于上列各组合数的其他解释可以参阅第一章第 1 节与第2节中的习题. 
特别是,根据第1节第3题，“由 n 个1与 JV - n 个0所构成的大小为 7 V 的有 
序样本（…）的数目等于该结果与二项分布有关，在初等概率论中非常 


重要. 
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例 1.设4 = { fli ， <22, ®3, 似}， | = 4 ，71 = 2 , 

( a ) (4) 2 = 4(4 - 1) = 12,相应的12个有序样本是: 


(fli j 03)1 (fli ^ 04)1 (fl 2 ? ®l)? (® 2 ? ^3) 7 (fl 2 ? ^4)7 

( fl 3 y ) ? (03 ? ) 9 5 ^ 4 ) ? ( fl 4 3 ^ ( a 4，®2)，(^4， 


4! 


= 6,相应的 6 个无序样 本是: 


( b ) Cl = 


2 ! 2 ! 


a! ， 03] ， [ai ， a4] ， [02^3] 3 [»2 ， 《 4 ] ， [^3 > ^4] • 


[fll ? Q ，2 


( c ) 4 2 = 16,在⑷中的 12 个有序样本的基础上，再添加4个 样本: 


( fll ， fll ) ， 2 5 ®2 ) 5 (®3 ， ) ， ( fl 4? ^ 4 ) • 


= 10,在 （ b ) 中的 6 个无序样本的基础上，再添加4 


5 ! 


⑹ CI 


Cl 




+ 2-1 

个样本： [ ai , ai ], [ a 2 , a 2], [^ 3 ,^ 3 ], [ a 4, a 4 ]. 




3!2! 


{ a l7 -.- } a N } 的子集数目与分割数目的计算. 

组合计数 

( e ) 2^ 


A 




意义 


A 为集合，有 | A | ^ N . A 中的所有不同子集的数 
目（包括空集0与集合 A 自身） 

A 为集合，有⑷ =： N . A 中的由 n 个元素构成的 
不同子集 D ^ l 的数目 (\ D \ = ^ 
n = 0 时，有 D = {0}, C° N = 1) 


N\ 




!(JV-n)! 


，0彡 n 彡 iV ; 当 


N\ 


A 为集合，有 | A | 二 iV . 将 A 划分为 r 个互 

, D r , 其中分别有 

- N ) 的所有不同分割 

…， |D r | = 


(g) CN(n lr ，. ,?y)= 

(“多组组合”或“多项式系数”不相交的子集 Ih , 


ni!** 


m, … 


» 4 » 


个元素 (m + 

货={认，… , D r } 的数目， | I > l | 


， • + n r = N ) 


• + n 


Til + * 




r 


ni, ， 




r ^ n 


N ， 对 A 所作的 


A 为集合，有 
所有如下形式的不同“分块分割”的数目： 9 


( h ) £? iv ( Ai ? - - - , An ) 




m 


(1!) a i … (jv，) a n ( 入 !)!"♦(〜)! 

(Ai ^ 0, 5^ iXi — N ) 

i=l 


{ Du ，…， DlAi ; …； DiVl , •…， Dn\ n }j 其中“块” 
[ Ai ,-' - , AaJ 由 Ai 个 i 元子集组成 (lAfel = 
i , Ai ); 若； ^ = 0,则相应的“块”无定义， 

亦即货中没有这样的“块” 


Y , D N ( Xi r - , X N ) A 为集合，有⑷ = N . A 的所有可能的恰含有 


(其中的求和系对所有满足如下条个类的分割谬的数目 




件的 Ai , - • * , Xn 进行：乂 > 


•N 


iXi = N ) 

i=l 


0 , EAi 
1=1 
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S %{1 ^ n ^ N ) 被称为二阶斯特林数 • 

0) b n = Yl s n 

n=l 


A 为集合，有阐 = iV . A 的所有可能分割的数目 
B n 被称为贝尔数 


(关于 （ f ) 〜⑴中所提到的各种组合数,可参阅第一章第2节中的习题 ©.) 

例 2. A = { ai , a 2 , a 3l a 4 }, \ A \ = 4, n = 2. 

( e ) 2 4 = 16 .这 16 个子集是： 


{ ai }, { a 2 }， { a 3 }, { a 4 } 


0， 


{ ai ? 02 }, { ai , 03 }, { ai , 04 }, {^ 2 , 03 }? {^ 2 ? 04 }, { 03 , 04 } 

{ai,a 2 7 03} {ai ? a 2 , « 4 } {ai ? a 3 , « 4 } {« 2 , « 4 } {«i ? 02,03? 04}* 


( f ) C | = 6. 相应的 6 个 2 元子 集是: 


{ai, a2 }， {ai ， 03 }， {ai, 04}, {a 2 ,03}, {a2,04 }， {as, 04}. 


= 4. 相应的 4 种分割为 


4! 


1， n 2 = 3, 于是 C 4 ( l ，3) = 


( g ) 设 r = 2, 


Til = 


1 ⑶ 


{a!} 与 {flt2 ， a3 ， a4 }， {^2} 与 {ai, <131 a 4} 5 

{a 3 } 与 {ai,a 2 >a 4 }, {ok} 与 {a^ a 2s a 3 }. 


4 


= 0， A 4 = 0， = 

i=l 


( h ) Ai = 2 ， A 2 = 1 , A3 


4, 


4! 


乃 4(1，2,0,0) 


= 6 . 




(1!) 2 (2!) 1 (3 I ) o (4!)°2!1!0!0! 


相应的“分块分割”是:® 


K a iM a 3 }l 与 I{«2, a 4 }】， 
|{a2},{a 3 }】 与 I{ai, a 4 }】， 

【 { a 3 } ， { a 4 }l 与 [{^1, ^2}]- 


I{ai} ， {a 2 }】 与 |{a 3 , a 4 }】， 
|{ai} ， {a 4 }】 与 |{a 2 , a 3 }l ， 
I{a2} ， {a 4 }] 与 [{ai, a 3 }l, 


① 关于一阶斯特林数可参阅本附录第 3 节——译者注. 

② 原书误 写为： 


[{ 叫 } ， { 助 }1 与 [{ 。 2 } ， { 叫 }1, 

[{ a 2 }，{ a 3 }l 与 [{ ai }，{ ci 4 } l ， 

【{ a 3 }，{ a 4}] 与 


[{ai} ， {a 2 }I 与 I ( a 3>, { 04 }!， 

【 {ai} ， {a4 }】 与 [{a 2 }, {aa}], 

{{ a 2>，{ a 4}] 与 [{ ai },{ a 3}], 


译者注 ■ 
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( i ) S \ = D 4 ( Q , 2 5 0 5 0) + D 4 ( l ,0, l } 0) = 4 + 3 = 7. 相应的分 割是: 


{ai} 与 {a2 ， a 3 ， a 4 } ， {a 2 } 与 {ai,a 3) a 4 }, {a 3 } 与 {ai,a 2 ,a 4 }, 

{a 4 } 与 {ai,a 2j a 3 }, {ai ， a 2 } 与 {a 3 ,a 4 }, {ai ， a 3 } 与 {a 2 ， a 4 }， 

{ai ， a 4 } 与 {a 2) a 3 }. 


可类似地算得: 


5^4 = 1， 5^4 = 7, = 6，^4 = 1, 

辑 =1 ， Si = 15, Si = 25, = 10, = 1, 

Si = 1 ? Sq = 31, = 90, Sq — 65, Sq — 15, = 1. 


(j) 由 （ i ) 可知 


匁 + 贫 + Sf + 对 =1 + 7 + 6 + 1 ：= 15, 

^ 1 + 15 + 25 + 10 + 1 = 52, 

= 1 + 31 + 90 + 65 + 15 + 1 = 203. 


B 




4 


N = 4 时的 15 个相应的分割为: 


{ ai , a 2j a 3? a 4 }； { ai } ? { a 2 }, { 03 }, { 04 }； 

■« 

{&} 与 {a 2 ， a 3 ， a 4 }， {a 2 } 与 {ai,a 3 ,a 4 } ? 

{a 3 } 与 {ai ? a 2 ,a 4 } T {a 4 } 与 {ai ， a 2 ,a 3 } 

{ai ， a 2 } 与 {a 3 ， a 4 }， {ai,a 3 } {a 2 ， a 4 }, {^ ，如 } 与 {a 2 ,a 3 }, 

{(^} ， {(1 2 } 与 {a 3 ,a 4 }, {ai} ， {a 3 } 与 {a 2j a 4 }, {ai} ， {a 4 } 与 {a 2 ， a 3 }, 

{ 辽 2} ， { 。 3} 与 {ai,{® 2 } ， {fl 4 } 与 {ai,03}, {d3} ， {a4} 与 {ai,02}. 


组合学方法的重要作用不仅体现在与初等概率论有关的组合问题的计数之中. 
它们还可以成功地用来建立各种关系式,其中的一个例子就是建立如下的 等式: 


nN = 


fe=l 


其中 1 彡 n 彡 TV , 而路是二阶斯特林数.（注 意： Sj , = = I ,并假定 

却 = 0, 5^ = 0, n > TV .) 

证明这类关系式的组合论的方法的思 想是： 其左端与右端表述同一种可能 
性的数目，但两端是通过不同的计算方法得到的. 

以上面的等式为例,我们来说明其建立过程. 
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设 A 与 B 是两个集合，它们中的元素个数分别为 | A 1 = AT , | B | 二 n . 我们 
来考察函数= f ( x ), 它对所有 A 有定义，而取值于 yeB , 由于对于 A 中 
的所有 iV 个元素: r ， 都可以让其对应于 B 中的 n 个元素 y 中的每一个,所以 
在 A 与 S 共可建立 n # 种不同的映射. 

现在来用另一种方法计算各种不同的函数的可能数目.对于每个 y eB , 
我们考察相应的逆像 r \ y ) = ： y = / Or )}. 选取某个集合 C Q B , 有 

\ C \ = fc , 1 设函数 y =- J { x ) 的值域恰好就是集合 C . 由于 | C | = /?，所 

以集合 A 被划分为 fc 个互不相交的非空子集,在每个子集上，函数各取一个值. 
m s k N 种不同的这种分割，而在各个子集上的取值则有 （ fc)fc = w 种不同的安 
排方式.所以值域恰好就是集合 c 的函数& = /化）共有 w 个. 

选择 B 的 fc 元子集 C 的方法有 Ct 种.所以，若 | A | = 7 V , |周= n , 则对 
所有 : r e A 有定义，并取值于 yeB 的函数 y = / ㈤ 的数目就是 




fc . 


fe=l 


由于按照第一种方法计算时，该数目为 n ' 所以所述的不等式获证.（关于采用 
“两种不同算法”的大量例子和 习题， 以及对组合学方法的众多成果的 介绍， 例 

如,可见[61],[45],[103],[104], [122] 等参考文献 •） 


§2. 概率结构与概念 

一切概率统计研究的基础是概率空间或概率模型（第二章第1节) 


( Q ， 晃 P ) 


其中 


Q 是所有试验结果 a ； 的空间， 

淨 是子集合的 <7- 代数， 

P 是褒中的集合的概率测度，亦即集合 A e 夢的 a - 可加函数，有0 < P ( A )^ 

1, P (0) = 0, P ( Q ) - 1. 

• 除了 a - 代数作为概率空间定义中的本质要素被引人概率论之外，在概率论中还 
会遇到其他各种不同的子集类 •. 代数，可分 a- 代数,单调类, 7T- 系， A- 系， tt-A- 系, 
柱集类等等.参阅第二章第2节. 

• 事件（集合) A 与 B 称为相互独立的，如果 P { AHB ) = P ( A ) P ( B ). 

多 中的集合所构成的两个子集类负与為称为相互独立的，如果任何集合 
A €负与 B e 爲都是相互独立的. 


I 
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事件木，…，称为相互独立，如果对任何 fc = 1，…， n 与1 < h < .. 
i / c 彡 ri , 都有 


. < 


P(n * • * n Ai k ) = ) ■ • • ). 

可以相应地定义多中的子集类 H 的相互独立性. 

以（丑，釣表示可测空间，即赋了 a - 代数#的集 合五. 

重要可测空间的例子有（参阅第二章第2 节)： 

( E , ^( E ))： 赋了博雷尔 a - 代数溪 ( R ) 的实直线 IEI ; 

( E n , 潔(，))：赋了 a -代数 ^{ W 1 ) = ^( E ) ⑭… ® 涿(肢）的空间 IET = 

• ■ x E ; 

( M °°, ^( M °°))： 赋了由柱集类生成的 a - 代数的空间 E °° = E x 


E x - 


…X R x - 


-* * 


( M T , ^( R T ))： 其中 T 为任一集合，由所有定 义在了 上的实值函数所构成 
的空间并赋了由柱集类生成的 a -代数 ^( R t ), 

( C , 激 ( C )) : 由（定义在区间 [0,1] 或区间 [0, co ) 上的）连续函数构成的空间 
C , 赋了由开集类所生成的代数 m { C \ 此处亦即为柱集类所生成的 a - 代数； 

( V , 綱)：由(例如，定义在区间[0，1]上的）左极右连函数，即(对一切 
t < 1) 右连续，（对一切 i > 0) 左极限存在的函数所构成的空间赋了由（按 
斯科罗霍德距离的）开集类所生成的 a - 代数 ^( V ), 此处亦恰好即为柱集类所 
生成的 a - 代数. 

随机变量 X = X(uj) 即为在 （ Q , 多） 上给出的，取值于 （ M , 溪 ( M )) 的实值函数, 
具有多可测性，即对任何博雷尔集合 B e 激 ( M )， 都有 

{uj : X{uj) eB}e^. 


參 


随机变量的最简单而重要的例子是集合的示性 函数： X(uj) = I a ( uj ), 其中 

A €多，而 


1 ,如果 Cl ? G A , 

0,如果 UJ ^ A . 

随机元 .设 （ Q , 多）与（丑，釣是两个可测空间 ，X = 是 Q 上的取值 

于五的函数.称 X ( uj ) 是随机元,如果函数 X ( u ;) 是多 〆 可测的，意即对任何 
Bes , 都有集合 { a ; : X { uj ) 

n 维随机向量 （义 ㈣ ，… ， X n ( w )) 是随机变量 , X n ( u ;) 的有序组. 
随机序列， 或称离 散时间随机过程 X = ( X n ( uj )) n>1 就是随机变量的序列 

Xi(cj) ， … ， X n (u?), ■ • •. 

随机过程义= { X t { u;)) teT (具有时间集合 T C M ) 就是随机变量组 X t { uj ), 


Ia(^) 


t e T . 
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( M ， 潘 ( E )) 上的分 布函数 F = F ( x ): 所有溪 ( M ) 可测的且具有如下三条性质的 






函数: 


1) F ( x ) 为非降函数. 

2) F (- oo ) = 0, F ( oo ) 

3) F ( x ) 右连续，且在每个点处存在左极限. 

若 X = X ( uj ) 是定义在概率空间 （ Q ， 多， P ) 上的随机变量，则在 （ E ， 潔 ㈤ ) 
上按下式定义了一个概率测度 Px : 


1. 


Px ( B ) = T { uj : X { uj ) ^ B } 

(更为准确，但有些累赘的写法是 P ({ u ; : X ( uj ) ^ B })), 该测度称为随 机变量 

X = X ( uj ) 的概率分布. 函数 F x { x ) = P x ((- oo , ㈤ )，是 （ M , 涿(肢 )） 上的分布函 
数，称为随 机变量 X ：- X ( uj ) 的分布函数. 

如果 X = ( X t ( uj)) teT 是随机过程，则概率 U ^ T ) 

V 

P tl ,.^ tn ( B )= P { uj ： ( X tl ( uj ) r - B e mT ) 

称为随 机过程 X 的有限维概率分布.函数 


， $ n ) = - (^) ^ ^1? * ' ' 7 (^) ^ 


F t 


(冗1， 




m m m 


1 T 


i 今 


称为随 机过程 X 的有限维分布函数. 

如果以勒贝格测度 A = X ( dx ) 作为 （1 R , 溪 ( M )) 上的基础测度，那么“勒贝格 
分解”(参阅第三章第9节 （29) 式或第七章第6节 （3) 式）将导致如下 结论: 
( M , ^( M )) 上的任一分布函数 F = F { x ) 都具有表达式 


i^(x) = aF + F ?ing(^)> 


其中 a >0, 6>0, Gt + 6 = 1， 

F ahc ( x )= f f ( y ) X ( dy ) 为绝对连续的分布函数(依博雷尔可测),具有密度 

— OO 

oo 

函数 / = /⑼ (/( y ) > 0, / f { y ) X ( dy ) = 1); 

— OO 

Fsin g ( x ) 是奇异的分布函数（在 OR , ^( M )) 上与其相应的测度 P sing ) 是关 
于勒贝格测度 A 奇异的测度，即 P sins 丄入. 

奇异分布函数 F sing ( x ) 本身又可以进一步表示为 

■^sing(^) — ^ * -fd-sing(^) ~h C • ^c-sing(^) ) 

其中 o 0, c > 0, d + c = 1, F d _ sing ㈨ 为离散的分布函数，其相应测度 P d . sing 
的支撑集中在不多于可数个点上，而 F c _ sing ( x ) 是连续的分布函数，其相应测度 
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P c _ sing 的支撑是不可数的勒贝格测度 A 为零的集合.（函数 F c . sing ( x ) 的一个例 
子是康托尔 函数; 参阅第二章第3节第1小节). 

我们记得， （ M ， 潘 ( E )) 上的测度 m 的支撑的定 义是： 


supp(/x) = {a: e M : jjb{y : \y — x \ ^ r } >0, Vr > 0}. 


由上述讨论可以得出 （ M ，^( M )) 上的一切分布函数 F = F { x ) 所共同具有 
的典则表达式（参阅第二章第3节第18题)： 

F { x ) = aiF d (x) + a 2 F ab c(^) 4- 吻心 ㈤ ， 

其中 ，凡卜 F d . sing ) 为离散的分布函数，凡 bc 为绝对连续的分布函数，而 F sc (二 
F c . sing ) 为连续的奇异分布函数，且叫 > 0, i = 1，2,3, ai + a 2 + a 3 - l . 
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• 定义在概率空间 （ n , 多, p ) 上的随机变量叉= x ( u ) 的一个重要数字特征是它 
的数学期望 ex . 

若 X = X ( uj ) 为非负随机变量，则数学期望 EX 就定义为 X ( uj ) 的关于测 
度 P 的勒贝格 积分： 


[ X ( uj ) P { du ;). 

Jn 

若 X = X ( uj ) 为任意随机变量 （X = X 十 — X -, 其中 X + = max ( X , 0), 
= - miix ^ O )), 则当 EX + 与 EX " 之一有限（即 min ( EX +, EX ~) < oo ) 

时，我们说数学期望 EX 存在， 或说 确定. 此时, 根据 定义，我们令 


EX = 


X 


EX = EX + — EX —. 


若 EX + < oo 且 EX " < oo, 亦即 E | X | 

数学期望 EX 有限 (或说随机变量 X 可 积).（参阅第二章第 6 节). 

概率论中的重要解析工 具有： 关于积分号下取极限的各种定理（单调收敛定理， 
法图引理，勒贝格控制收敛定理)，一致可积性概念，不等式（切比雪夫不等式， 
柯西-布尼亚科夫斯基不等式,延森不等式，李雅普诺夫不等式，赫尔德不等式， 
闵可夫斯基不等式，等等)，拉东-尼科迪姆定理，富比尼定理，勒贝格积分中的 
换元定理.（参阅第二章第6节 .） 

随机变量 X = X { uj ) 的 方差是 


因为 | X | = X + + X ~, 则说 


< OO, 


UX = E ( X - EX ) 2 . 


量 a = +%/DX 称为随机变量叉(偏离 EX ) 的标准 （线性）偏差. 
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如果（ X ， Y ) 为随机变量对，则它们的协方差是: 


cov ( X , Y ) = B { X - BX){Y - EY ) 


(假定相应的数学期望是确定的). 

如果 0 < DX < oo , 0 < < 00 , 则量 


cov ( X , Y ) 


P ( X , Y ) = 


VDXVDy 


称为随机变量叉与 y 的相关系数. 

若 X 为随机变量，则数学期望 EX 、 若其确定）称为 X 的 n 阶矩或第 n 
个矩.量 E ( X) n = BX(X — 1 ) …(X — n + 1) 称为其 n 阶阶乘矩. 

若 F = F ( x ) 为分布函数,则函数 


itx 


cos txdF ( x ) + i sintxdF ( x ) ] , t € E , 


dF { x ) 




e 


E 


E 


R 


称为分布 JP 的特征函数 • 

当 F 是随机变量 X 的分布函数时，函数 


itx 


$ x ( i ) = 


dFx { x )^ t ^ M , 


e 


R 


称为随机变量 X = X ( uj ) 的特征函数•(参阅第二章第 12 节,）此时 ip x ( t ) = 


Ee 狀⑼ • 


若 X 是非负随机变量,具有分布函数 Fx = F x ( x )， 则函数 


F x ( A ) = / 

Jo 




dF x ( x ), A >0, 


e 


称为分布函数 Fx 或随机变量 X 的拉普拉斯 变换.在此，有 F x ( X ) = Ee - AX . 

在第二章第3节中列举了最常用的离散分布或具有密度的概率分布. 

研究离散随机变量概率性质的最有效的工具是母函数.这种方法在其他数学分 
支中也广为所知,并且是研究具有复杂结构的数列性质的有力工具. 

如果随机变量 X 分别以概率_ _ _ _ 

0,1，2,…，那么在概率论中，就将 X 的母函数 G ( s ) 定义为 


{Pk >0， E 办 = 1 ) 取值 


P0,Pl,P2,- 


鬌 華 


k=0 




k 


X 


， |sK L 


G { s ) = Es 


fc 二 0 


由随机变量叉的母函数 G ( s ), 可以唯一确定其分布 ( Pk ) k ^0： 


G ⑻ (0) 


P{X = k } 


Pk 




ziz 


k \ 


A 
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若有向量值随机变量 X = ( X 1; ..., X d ), 其每个分量不均在集合 {0,1,2,...} 
中取值，则其母函数 G ( s ), 其中 ( Sl ，…， 〜)， 按如下方式 定义： 


G( Sl ，…， s d ) 二 Esf 1 . 


X d 


E ~ ， ... 如 4 … 々， 


， • s 


d 


ikd—0 


其中外 i 


P{^i = fci ， … ,Xd = fed}, \sj\ 彡 1， j = 1 ， … ， d. 

如果随机变量 s X d 相互独立，则有 


zzr 


5 fed 


* * ■ 


G(si ， … ， Sd) = G^si) … Gd(sd)j 


其中 G j ( s j )= Esf \ j 

上面所给出的关于随机变量 X 的母函数 G ( s ) 的定义中，假定了叉只在 
集合 { 0 , 1 , 2 ,...} 中取值，其值非负.为了满足不同的需求，可将这一概念推广 
到 X 既可取非负整数值，又可取负整数值的情形，亦即有 P{X = k } 

中 = 0,土 1，±2,...，且 E 

fc=_oo 

对于这样的随机变量 X ，其母函数 G ( s ) 的定义为(类似的情形 A : = 0,1，…) 


1，…， d 




其 


Pk> 




Pk = 1- 


E 


x 


k 


G { s ) = Es 


PkS 


(其中 S 使得 E | s x | < oo ). - 

此类随机变量的典型例 子是 ： X = 其中随机变量 Xi 与 x 2 均在 

集合 { 0 ， 1 ， 2 ，. ..} 中取值，分另 [] 有自己的母函数 G Xl ( s ) 与 Gx 2 (s). 

若 A 与 X 2 相互独立，则有 


G ) 


G x ( s ) = G Xl ( s ) G Xl 


特别地，若不服从参数为\的泊松分布 , k 1，2,贝！] G Xi ( s ) = 因而 

随机变量 X 二 Xi - X 2 的母函数 G x { s ) 就是 

其中 t = s ^/ Xi/X 

由分析数学知道，对 ： r e M ， 有 


一(入1+久2) + 久1 沒 + A2/S _ g 


一 (Ai+A2)p\/Al 人 2(6+1/ 尤） 

C 5 


= e 


2 - 


J 2 仏 ㈣ 




e 


其中4(2岣是 fc 阶第一类修正的贝塞尔函数（例如，参阅 [79] 第5卷， p 820 


825)： 


2r 


X 


h {2 x )^ x k J 2- { 


fc = 0, 士1，士 2, • * • 


!r(fc + r + 1) 


r=0 
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(换句话说，对于每个 : r e M , 序列 {4(2^)} fc =0) ± i ,- 的母函数由的公 
式给出 .） 


这样一来,随机变量 X - Xi - X 2 的概率分布就由如下的公式 给出: 


k /2 


Ai 


一（入1+入 2) f : 


/n(2VAlA2), 


P{X = fe } = 


e 


入 2 


其中 & = 0,士 1，土2,--. 

关于与母函数有关的其他的计算的例子可以参阅 5 例如，第二章第6节第 
28题，第32题，第8节第 22 题，第七章第2节第18题,第八章第8节第19题. 

正如前面所指出的，母函数在数学的许多分支中都起着重要的作用，特别地，在 
离散数学与组合论中亦是如此. 

从本质上说，解决组合问题的代数方法的基础就是母函数，而这恰恰形成 
了组合学中 的一个 方向，即所谓的 代数组 合学. 

简单说来，事情是这样的，许多组合运算和组合解释都能够与一定的代数 
运算和代数解释挂上钩. 

我们以彩票为例，看看如何可以利用母函数的代数性质来解决组合计数问 
题.假定这些彩票具有自000000至999999这样一些6位数号码，要求求出被人 

随机购买的一张彩票的号码的前3位数字之和与后3位数字之和相等的概率， 
显然,这里对有利样本点个数的计算是一个纯粹的组合计数问题.例如，可以通 
过枚举的办法来计数.然而，（正如我们后面将会看见的 ,） 该数目为 55252®, 对 
于手算,而不是用计算机来算，其难度可想而知. 

在这个涉及6位数票号的问题中，如同在类似的 2 n 个数码问题中一样，用 
母函数办法可以很快地求得答案.设 X = ( X l 5 …， X 6 ) 为6维随机向量，其各 
个分量相互独立，均有跸= P{Xi = k } = 1/10,其中 fc = 0,1,…， 9. 

Xi 的母函数为 


9 


10 


Gxi («) = 


k 


- ^( l+s + -.*+ s 9 ) 二 


10 (1- s ). 


fc =0 


由独立性可得 


3 


10 


1 


— s 


G Xi -^x 2 +x 3 (s) = G Xl {s)Gx 2 (s)Gx 3 (s )= 


10(1 - s)J ■ 


( s ) 亦同样如此. 


而 G 


x 4 + x 5 + x 6 

现在考察随机变量 Y = ( X 1 + X 2 + X 3 )-{ X 4 + X 5 + X 6 ). 
由独立性立知 


6 


10 




10 6 s 27 


1 


— 8 


Gy { s ) = G 


{ s ) Gx 4 ^ X 5 + X g 




— s 


①原书此处写为 55250, 与下面的计算结果不符——译者注 - 
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如所周知，在母函数 


Gy { s ) = 


k 


k 


中， （ s G 的）系数如就是概率 P{F = 0}, 而它正是我们所感兴趣的“彩票号码 
的前3位数字之和与后3位数字之和相等”的概率. 


6 


10 


展为（关于 s fc ，fc = 0, 土1，土2, • _ • 

的）幂级数，（经过简单的但却足够烦杂的“组合数”运算，）即可求得 


1 — S 


分别将 (1- S 10 ) 6 , (1- S )_6 和* 


1 — 8 


55252 


= 0.055252. 


Qo = 


10 6 


(亦可参阅第二章第6节第79题 

通常情形下，任意一个数列 tx 二 ( a n ) n>0 的母 函数是 指形如下式的（形式) 


幂级数 


2 


G a ( x ) 


ao + a\x -f d2^ + …， $ € M. 




若该级数有非 0 的收敛半径，则它事实上定义了一个 函数， 它的性质可以反 
映出数列 a = ( a n ) n ^ o 的许多性质.关于此类级数的收敛半径问题通常会引起关 
注，然而在关于母函数的广义理论中，却认为形式级数 G a ( x ) 是数列 a 二 ( a n ) n>0 
的一种通过双方对应 


G a ( x ) 


( a n ) 


建立起来的形式独特的“重新编码”.根据这种理解，那么如果（心） ㈠ G b ( x ) : 而 
为常数，则有 


C 


+ ^ n ) 

的最重要的性质之一是 


G a {x) + cGb{x). 




对应 




Ga ( x ) G b ( x ) ) 


1=0 


n^O 


( an ) n^O 与 6 = (6 n ) n ^o 的卷积对应着母函数的乘积 • 不难 


这表明，数列 

看出，所引入的形式运算（相加，乘以常数,形式级数的相乘）都具有交换律,结 
合律和分配律，一言以蔽之，形式级数具 有代数结构. （更详细的，可参阅[61]， 


a 


[122]，[1031， [104].) 

与根据数列 a 二 ( a n ) n 冰构造幂级数 G a ( x ) 相对应，有时建立所谓 的指数 
母函数 则更为有益： 


X 




a 


n \ 


n^O 


(此处仍将其理解为形式幂级数如同母函数一样，亦存在如下的 一一 对应关 


系: 


{ an ) 


K ( x ); 
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并具有性质: 


(fl n + c6 n ) 

n 


E a ( x )( cE h ( x )), 




E a ( x ) E b ( x ). 


n—i 


i=0 


n^O 


看几个例子，如果数歹 (J a = ( a n ) n ^ 0 为 a n = 1 ， n > 0,则其母函数形如 


Ga { x ) = ^2 


n 


， \x\ < 1 


X 


l ~ X 


n=0 


且有 


N 


[Ga(x)] N = 




n 


n 


X 


+n-l 


n—0 


n=0 


该式可按下法得到. 

观察 （1 + z + rc 2 + …)' 我们可有几种办法得到#的系数？写 


(1 + ^ + a: 2 H - ) N — (1 + a: + a: 2 H - )(1 + a: + x 2 + • ■ ■ ) ■ ■ • (1 + a: + a: 2 + * • •). 


如果从右端的第一个括弧中取出， S 从第二个括弧中取出…，从第 iV 个 
括弧中取出: c n ' 则应当有 a : ni rc n2 = rc n . 满足关系式 m + n 2 + ---+ n N = 

的非负整数组 （ m , n 2 ，… , n N ) 的数目等于该方程的非负整数解的数目，即为 

(参阅第一章第1节第6题).如此一来，即知数列 ( C % +n ^) n>0 的母函 
数是 （1 - x )~ N , \ x \ < 1. 

由此可知 


71 


J 2 2 ~ nC N 

n=0 

数列 （ Q ) n > 0 (当 n > iV 时, Q 二 0) 的母函数是 （1 + x ) N : 




+n —1 


N 


(i +X ) N = 


n =0 


(可采用上面证明的母函数的类似办法证明这一结论 .) 

考察表达式 


{l + x) N (l + x) M = { l -^ x ) 

将其两端按 rr 的方幂展开，再令 两端/ 的系数相等，容易得到 


iV+JVf 


N 


T , C N C M j - C N 


+ M . 


j=0 
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(该等式以“范德蒙德卷积”的名字著称，或称为超几何 等式; 亦可参阅第一章第 
2节第2题 .） 所采用的证明方法很好地展示了母函数方法可以用来建立各式各 
样的组合关系式. 

在关于‘母函数”这部分内容的末尾，我们回过来观察前面提到过的二阶斯 
特林数；与贝尔数我们记得，二阶斯特林数是将 iV 元集合4划分 

为 n 个两两不交的非空集合的所有可能的分割贫的数目，贝尔数 B n = J 2 

是对 iV 元集合4所可能作的所有不同的分割的数目. 

在第1节“组合论基础”中，曾引入公式 

组合学证明.（我们记得， S ^ = S ^ = 1, S % = 0,且对 7 V ， 有= 0.) 

由该公式可以推出，对于每个 iV > 1，多项式 


n=l 


n 


= : E 讳 ㈨ fc , 并给出了它的 


N 


n 


N 


(^) 

n=l 

均以 x = 1,…， N 为根.又由于 x = 0也是它的根，故知 Pn ( x ) 三 0. 如此一来, 

对任何1与 : c e R , 就都有 


N 


Pn ( x ) 


ic G M 


x 






n? 


N 


乙极⑻ 


N 


X 


n • 


n=l 


若再认为对一切 iV > 1，都有*9% = 0,并假定邠=1与（4。= 1，则可见 


N 


E 邱⑷ - 


N 


X 


n=0 


对一切 iV = 0， l ，2, …与 rceR 成立 • 

利用这一公式,我们得到 

㈤ n =!：€(!：; ㈤ n 

\ n ^0 

(i + ( e y-i)r = Y,^(e y -inx)n, 


n^O \N^Q 


N^O 


N 


( y ^) 


E 


= 6 鉍 


x 




N \ 


N^O 


n^O 


其中最后一步用到泰勒公式 （1 + Z ) 1 = En^O 

比较上式的最左端与最右端，我们得到阶斯特林数 ( S ^) N>0 的指数型母 
函数：对一切 n > 0,有 


n * 


N 


y 


E ^ 


n \ = ^ i ( eV_1 ) 


n 


N^O 


(5 g = 1; 对 TV > 1, 有玲 = 0; 对 iV < n ， 有 ；= 0). 
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用类似的方法，我们还可以得到数列（邓 ) n ^ 的母 函数: 

= e_i 


N 


m x 


ml • 


n^O 


m^O 


事实上， 


i+n 


X 




E 


x e 


i \ 


i^O 


m^O 


此因当 m 彡 n - 1 时，有 ( m) n = 0. 再利用等式 


N 


= E %㈣ n ， 得 


m 


n^O 


X 


= Y1 s ^ x = XXI 

n^O 


m ! 


n^O 


n^O 


m^O 


N 


E^[ E; ㈣ - 卜 E 


m x 




m \ 


m^O 


n^O 


m^：0 


这就是所要证明的. 

若令 $= 1， 则可得到关于贝尔数的多宾斯基 公式: 




-1 


Bn = 6 


m^O 


在前面定义二阶斯特林数邱 T 时，我们是从其组合意义出发的，即把它视为 
将 iV 元集合4划分为 n 个两两不交的非空集合的所有可能的分割货的数目. 

然后再证明对一切 iV 彡0,都有，=会 S ^( x ) n , 

阶斯特林数（冷） 


n—0 


可以按照下式代数地 定义: 




0«JV 


N 




(*) 


n=0 


这些数的组合意义 如下： 设 （ Tn , …， 7 HV ) 是正整数 （1, …， 7 V ) 的任意一个 
排列.以4表示其中有 n 个“轮换，’的排列个数 .（ 如,在排列 
中有两个“轮换可以证明如下的递推关 系式： 


1，2, 3, 4，5 
2, 1，4, 5，3 


C N — 4一\ + (^ — 1 )C 


N-l 


(其中 C g = l )， 从中可以推出 


N 


c ^ x n = x(x + 1) … + iV — 1)， 


7l~0 


§3. 概率论的解析工具与方法 


* 325 . 


将这个关于数(4,…，4的母函数与上面的关于一阶斯特林数也，硌，…, 
的母函数 （*) 相对照，可知 


N- 


Cl = (-1) 


5 


JV' 


如此一来，除了符号之外，一阶斯特林数就重合于正整数（1，…， A 0 的恰含有 
个 “ 轮换”的排列的个数. 

若 X 为在集合 iV = {0,1, 2 ,… } 中取值的离散随机变量，则其母函数曾定 
义为 G ( s )^ Bs x , | 5 | < 1. 现在记 Pfc = P{X = kh 我们发现,幂级数 


n 


g( s )=y^pks 


k 


k =0 


就是数列 CPfc ；^。 的母函数. 

与此相关联的概念是矩母函数(参阅第二章第 6 节第 32 题） 

M ( s ) — Ee sX 

(数学期望 Be sX 显然是确定的与有限的，如果，例如， -1 < 5 < 0). 当所有的矩 

= EX fc ， k ^ l 7 都有限时，由 M ( s ) 的定义可知，（形式）级数 


(fc) 


m 


k 




M ( s ) = 


kl 


k =0 


是数列 （ m ⑷ )_ 的指数型母函数，概率论中，在考察矩 m (fc) = EX k 的同时, 
也往往考察阶乘矩 


( m) fe = E ( X) k = EX(X - 1) • • • (X — /b + 1) 


与二项矩 


( X) k ( m) k 


6⑻= E 


k\ 


k\ 


(二项矩名称的来 源是： 由于（7务=^，所以= EC ^ 是二项式系数的期 


望) ■ 


与阶乘矩数列 (( m ) fc )^ o 相对应的指数型母函数为 

( M )( s )= f ^( m ) fe ^, 


fc =0 


与 ( & ( fe )) 


相对应的母函数为 


fc^O 




fe=0 
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显然有 ® 


M { s ) - G ( e 5 ), { M ){ s ) = B { s ) = M( 5 + 1). 

了解下述事实是有 益的： 利用前面介绍过的公式 


N 


N 


n=0 


N 


X 




n=0 


其中玲与冷分别为二阶斯特林数与一阶斯特林数，可以推出联系矩 m (n) = 
BX n 与阶乘矩 ( m ) n - E ( X ) n , n 彡0的关 系式： 


N 


N 


= 53 S N ( m )n j ( m)iv = 52 


(N) 


m 


n—0 


n=0 


应当指出，数学分析中广为了解的许多数(诸如,伯努利数、欧拉数，等等）与许 
多多项式（伯努利多项式、欧拉多项式、埃尔米特多项式、阿贝尔多项式，等等) 
都是通过母函数来定义的. 

⑷伯努利数 60 , 6 ^ 62 ，...与伯努利多项式忍 0 ㈤ ，氏 ㈤ :迅⑷，…是通过 
(它们自己的）指数型母函数来定 义的： 


50； 


n 


n 


se 




s 


s 


= 


与 


n ! 


e s - 1 


e 5 - 1 


n=0 


n=0 


^8 = —忐与 


(一些特殊的值为： 6 。 = 1A = ~\M = 

Bo ⑻ = l , B \( x ) — 


42, 


\,B 2 {x) =x 


x 3 _ 3^2 + 


例如，可 


+ 善， = 

参阅 [ 2B ]). 除了 = - §夕卜，其余脚标为奇数的伯努利数都是 0 . 关于它们的一 * 
些其他性质开列于下： 


2 


X — 


X 


2 


2 


N 


( i ) E C 》 b N — n , iV = 2,3, …. 

( ii ) 所有均为有理数. 

( iii ) B N (0)= b N , B n {1) = (~ l ) N b N , N >0. 


N 


N-n 


( iv ) B n ( x ) = C 7 ^ b n x 

( v ) B f N { x ) = NBn ^ x ), N ^ l . 

( b ) 欧拉数 e 0 ， ei ， e2 ，…与欧拉多项式五 0 ㈤ ，取 ㈤ ，均 ㈤ ，… 是通过（它 
们自己的）指数型母函数来定 义的： 


X 


n 


2e 


S 


n 


2 e 3 


s 




E 




°n * 


e 2s + 1 


n ! 


s 


e 


n~0 


n=0 


译者注. 


①原书 写为： ( M )( s ) = B ( s ) = G(s + l ) 
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•. 的指数型母函数就是函数 


3 


2e 


所以可以说，欧拉数 eo ， ei ， 


由于 


已 2, - 


— ch s ’ 


chs _ 


由定义 可知： 

( i ) e # = 2 n E n ⑷， W . 

( ii ) Em { x ) — C ^ E n 

( iii ) ⑻ ^ NEn -^ x ), N ^ l . 

( iv ) 脚标为奇数的欧拉数都是 0 ,脚标为偶数的欧拉数都是整数. 

— 1 些特殊的欧拉数为 ： eo = l , e2 = — 1, e4 = 5, eg = —61, eg = 1385; 参阅 


iV — n 


, N ^ o . 


x —- 


2 


[28]. 


( c ) 埃尔米特多项式的引入方式在分析中与在概率论中多少有些不同. 

在分析中，埃尔米特多项式 H n ( x ), n ^ O , 是按照通常的方式，由公式定义 

D TL , tp { x ) 

其中 ^{ X ) = - A = e -" 2 . 相应的指数型母函数 ( sem ^ xeR ) 具有简洁的表达式: 


的: 


H n ( x ) — {- l) n 


n 


s 


2 




2sx — s 


n ! 


n=0 


在概率论中， 一 般采用如下的（多少有些不同的）埃尔米特多项式 

D n cf )( x ) 


He n ( x ) — (― 1 ) 


n 


n > 0 , 


2 


/ 2 ,即标准正态分布 a ^ o , 1 ) 的密度函数.（请注意,在第二 


其中 < K X ) = ~^ e 
章第 11 节中,这些多项式 He n (^) 写为 H n { x ).) 

与多项式 He n ( x ), n ^ O , 相应的指数型母函数 { seR , rc e E ) 具有如下形 


—X 


式: 


n 


S 


2sx — s 2 /2 


X> en ㈤ 


= e 


n ! 


n=0 


不难看出 


Re n { x ) = 2- n / 2 H n {2~^ 2 x ). 


一些特殊的 值为: 


H 0 { x ) 

Hi{x) = 2x, 

H 2 {x) = 4 x 2 - 2, 

丑 3 ⑻ = Sx 3 — I 2 x , 


Heo(3J) = 1 ， 

Hei { x ) 

He2 ⑷ = x 2 — 

He3 ( x ) = X s ~ 3 x . 


= 


rr ， 
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由于布朗运动 B 在随机过程论中经常使用如下形式的埃尔米特 

多项式 n ^ o , x eR , t e M +, 它们是通过指数型母函数 （s e R ) 来 
定 义的： 


一 4 


Y^Ue n (x,t)~ = e 2 

n=Q 

(往往将 Ue n ( x , t ) 写为 H n ( x ， t )). 引入这些对象的原 因是： 它们具有某些有趣 
的性质，例如,对于（标准）布朗运动 B = (B t ) t ^ 0} 如下二过程 


5 无 




( He n ( B t) t )) t>0 , n 彡 0 与 


t>o 


都是鞅（关于由布朗运动所生成的滤子). 

( d ) 设 X 为随机变量，其矩母函数 


X 


G{s) = Be 8 


对 N < A 有限，其中 A 为某个正数. 

引入函数 


e 


^4(5, x ) = 


x G E 


〈九 


s 


G(s ) ， 


(在保险与金融数学中，函数 


称为埃绍尔变换，参阅第七章第11节 .） 
根据函数 A(s,x) 可以通过如下的展开式来定义阿贝尔多项式（亦称为谢 
费尔 ( Sheffer ) 多项式） Qq{x),Q 1 (x),Q 2 {x),-■ • : 


X ^ 


G ( s ) 


k 


S 


A{s,x)=Y^Qk{x)—. 


k=0 


换言之， ^4( s ，: c ) 

若 X 为服从区间 [0,1] 上均匀分布的随机变量，则其矩母函数为 


就是多项式序列 ( Q k ( x)) k> o 的母函数. 




1 


e 


G{s) = Ee 8X = 


s 


此时 


se 


^4(5，: r ) — 


e s - 1 


因而,相应的阿贝尔多项式 Q k ( x ) 不是别的，恰就是伯努利多项式 B k ( x ). 

若 X 为伯努利随机变量，有 P{X = 1} = P{X - -1} = 1/2,则其矩母函 


数为 


G{s) = Be sX 


此时 


2e s 


A(s, x) — 


e 5 + l ， 
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因而，相应的阿贝尔多项式就是埃尔米特多项式. 

若 X 为服从标准正态分布 ^(0,1) 的随机变量，则其矩母函数为 


s 2 /2 


G(s) 


此时 


一 s 2 /2 

因而，相应的阿贝尔多项式 Qk { x ) 重合于埃尔米特多项式 He fc ⑻. 

以 M ， 吻,…表示随机变量 X 的半不变量.则可证明， 


A(s, x) 


= e 




QiO ) 


=X — 

Q 2 (^) = ( 工 一 Ki)2 — K2 y 

Qs(^) — (x ~ K ； i) 3 — 3 托 2 (尤 — K\) — 


托 3- 


当 X 〜 AT (0,1) 时，有 


/*£ 工 0, =r 1, 化 3 


K 4 = 


Qo(^) — Heo(ir) = 1 5 

Qi ( x ) = Hei ( ir ) = x , 

Q2 { x ) = He2 { x ) 

Q3 ($) = He3 ( x ) ~ x 3 ~ 3 x . 


2 


=x 


我们指出，为了能唯一'确定多项式 k = 1,-* 

E | X |- < 00 . 此时有如下的关系式（所谓的阿贝尔式）成立 (Q 0 (x) = 1)： 


事实上只需要 




Qk( x ) = 允 Qfc - 1( 工 )，1 ^ ^ 


n . 


非负随机变量 X 关于子 0- 代数 < st 多 的条件数学期望是非负随机变量(一般 
来说，是取值于亚的广义随机变量） E(X I <S) = B{X\ 穿) M ， 有 

1) E ( X | 穿)是淨 可 测的； 

2) 对任何4 e 發，都有 


B[XI a ] = E[B(X\^)I a ], 


对于任意随机变量 X (= X + — X -)，若 P - a . s ， 地有 


min [ E ( X +|^)( w ), E ( X - I 爹)⑼]< 


00 , 
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则认为 X 关于子 P 代数的条件数学期望是确定的，并且 


E ( X | W )( u ) = E ( X +| 淨 )( w ) - B ( X ~\ 淨 )( a ;). 


当 X ( u >) = / aM , 即为某个集合 Ae ^ 的示性函数时，将条件数学期望 
Wa | = E(/a 1^)(0；) 写为 P (增）或 P (寧)(0；)，称其为事件 A 关于子 
代数的条件概率. 

如果淨是某个随机元 y = Y { uj ) 所生成的 tr - 代数（为直观起见，通常将该 
a - 代数 记为％ 或 a ( F ))， 则相应的 E(X | 务）与 P ( A \^ y ) 则简记为 E{X | Y ) 
与 P ( A \ Y) y 并分别称之为 X 关于 F 的条件数学期望与事件 A 关于 F 的条件 
概率.（参阅第二章第7节 .） 

同数学分析中一样，概率论中考察随机变量的各种不同形式的收敛性（依概率 
收敛 •. 三 X ;几乎必然收敛或几乎处处 收敛 ： — X ( P - a . s .) ; 依分布 收敛: 

X (也可表示为 X n 1 巧 X ， Law(D — Law ( X ), Law ( X n ) 

p 阶 （p > 0) 平均收敛 ：= X ; 逐点收敛： X n { u ;) ^ X ( uj ) 

阅第二章第 10 节 .） 




d 


X n 


Law(X ))； 

G O , n ^ 1. 参 


,^ 


除了随机变量自身的各种收敛性之外，概率论中还特别关注概率测度，概率分 
布以及它们的特征的收敛性. 

最重要的一种收敛形式是：在某个可测空间（值得提及的是空间 E n ， ir°，c 
与: D ) 上给出的概率测度 P n ， 71^1,弱收敛到测度 P : 

如下的各种结果,诸如大数律，中心极限定理,泊松定理，收敛到无穷可分 
分布等等都是关于概率测度弱收敛的结论中的典型例子.（参阅第三章 .） 

概率论中的许多研究都涉及“概率为1地成立”或“几乎必然地成立”的性质. 
例如， “ 0-1 律”，级数的几乎必然收敛，强大数律，重对数律（参阅第四章).在对 
它们的研究中， 博雷 尔-坎 泰利引 理起着重要的 作用： ^ 

设4乂 2 ，…为一序列事件（集合)，（人 i . o .} (三= n G 如）是 


p. 




"Hi— 1 fc == 7X 


那些在序列 - ** 中无限多次 (infinitely often ) 出现的 cj G O 的集合.则 

⑷若 £ P ( A n ) < oo ? 则概率 P{^ n i . o .} = 0 . 

n=l 

( b ) 若 £ P (人 ）= oo , 且事件木 ，也 ，… ■ 相互独立，则概率 P{^ n Lo .} = l . 

n=l 


§4. (狭义）平稳随机序列 

• 在概率 空间 ㈨ ，多， P ) 上给出的随机变量序列 X = { X u X 2 r -) 称为狭义平稳 
的（严平稳的)，如果其分布律 Law ( X )( 换言之，分布 P x ) 对每个 fc > 1,都重合 
于“移步” if #!l 9 k X = ( X fc +1 ， X fc+2 ，…)的分布律 Law (^ fc X ). 
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借助于动力 系统理 论中的概念，思想和 方法， 容易进行这类序列的性质研 
究（见《概率》第二卷第五章). 

该理论的核心研究内容是保测的可测映射. 

映射 t ： 称为可测的，如果对一切 AeJ ^ y 都有集合= { w : 

T ( cv ) e A } 这样的映射称为保测的，如果对一切都有 

P ^- U ) ^ P (^). 


“狭义平稳序列”与“保测变换”之间的联系清楚地表现 如下: 


设了 为某个保测映射，而= X ^ lo ) 为随机变量. X n { u ;) = X ^ T ^ uj ), 
其中 T — 1 是 T 的 n — 1重幂.则序列 X =^( X 1 , X 2 r --) 是狭义平稳的（严平 


稳的). 


逆过来的命题也在一定的意义下 成立： 对于每个狭义平稳的序列 X = (&, 

叉2,，.，)，都可以构造一个新的概率空间（仏^后)， 一 个保持测度戶不变的 
保测映射 f : n 


a 以及一个随机变量使得序列 x = 

(4(0；), 元 ( Ta ;)， …）的分布律 Law ( X ) 重合于 Law ( X ). 

第五章中关于这类性质研究的基本结 果有： 自返性（“庞加莱自返性定理”)， 
遍历性,混合性等.核心结论是伯克霍夫-辛钦遍历性定理，其（既是关于保测映 
射的，又是关于狭义平稳序列的）形式之一可陈述 如下： 

㈤ 若 T 为保测遍历变换 ， C = CM 为随机变量，有 E | C | < 00 , 则 


卜 EC (P-a.s .)； 


lim — 
n n 


fc=0 


(b) 若 X = ( X u X 2 r -) 是狭义平稳的遍历序列，有 EIAI < 00, 则 




lim — 
n n 


= EXi . 


k =0 


§5. (广义）平稳随机序列 

无论是从理论的观点,还是从应用的观点，在研究这样一些序列 X 时,作如下的 
假定都是合理的与方 便的： 首先假定它们对一切 nGZ -{0,± l , 土2,… } 都有 定义; 
其次假定序列中的各项都取复数值 • 换言之，假定 X =(…，^^，為，％，…)，其中 
X n 都是复值 （= + ib n ), 并且对一切 n e Z ， 都有 E | X n | 2 < oo ; 见第六章第1节. 

关于“广义平稳”概念的基本假定是：对一切 n，m e Z ， 都有 EX n = EX 0 与 

COV 义 m) = COV (^ n » 义 0). 

不失一般性，可设 EX 0 = 0,从而 
EX n X 0j neZ , 称为协方差函数. 


( X n , X 0 ) = EX n X 0 . 函数 i ?( n ) = 


COV 
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如下两个结果（赫格洛茨 ( Herglotz ) 定理与关于序列 X 的谱表示定理）表明， 
在一定的意义下，广义平稳序列可以视为在对具有随机振幅的调和分量求和的 
过程中所产生的随机对象（带有相应的极限过程，充满谱频率的所有可能值的 




区域). 


第一个重要结果是（第六章第1 节)： 任何协方差函数 R ( n ), neZ 都具有 


谱 


iXn 


學)， 

其中 F = F ( B ), B e ^))是某个（实值）有限测度,而积分理解为勒贝格 
• 斯蒂尔切斯积分.第二个重要结果（第六章第3节）给出了序列 X = ( X n ) nez 
自身的谱 表示： 任何 neZ,m ( P - a . s .) 有 


R ( n ) 




— 7T 


iXn 


Z(dX), 


X n = 


其中 Z = Z ( A) t A g tv)) 是正交（复值）随机测度，具有 性质： EZ ( A ) - 
0, E | Z ( A )| 2 = F ( A ). (请记住我们的 约定： EX 0 = 0.) 

谱函数 F = F(dX) 与谱密度 / = /( A ) (F{B) = ff(X)dX, Be 潘 ([ 7 T ， tt ))) 5 


如果它们存在,则在对所考察的过程 X 的相关谱分析中起着重要的作用，它们 
给出了关于频率与强度的完全确定的 表示， 即关于协方差函数的 it 成分”的 
表 7 K . 


由性质 E | Z ( A )| 2 - F ( A ) 可以明白谱函数在“谱随机分量”的表述中所起 
的作用，整体给出了 A = /二 e iXn Z{dX), n6 Z. 


谱特征值的这些性质及其直观性解释了在关于平稳序列（以及连续时间场合下 
的平稳随机过程）的统计学中对它们所表现出的兴趣，因为统计学就是根据试 
验数据构造概率-统计模型，运用这些模型去构造关于协方差函数，谱密度以及 
它们的特征值的“好的”估计量的（第六章第 4 节)， 

还应指出，正是在所考察的“广义平稳”的框架内，（柯尔莫戈洛夫，维纳) 
获得了关于随机序列与过程的过滤结构，外推和内插方面的周知的结果（第六 
章第6节). 


§6. 鞅 


在鞅论的建立过程中，对概率 空间⑴，多， P ) 富有成效地补充了它的结构，即在 
其中引入了 a - 代数（滤子）流 （久 )00, 其直观意义是，多 n 是到时刻 n 为止（包括 
时刻 n ) 所观察到的“信息”.这样的 结构⑴ ，多， (^ n ) n >0, P ) 被形象地称为滤子概 
率空间.在这样的概率空间中，还引入了 诸如： （关于流的）“相容性”，“可 
预报性”，“随机序列”，“鞅性”，“马尔可夫时”，“停时”，等等概念. 
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与流 (^ n ) n ^ O 相对应的序列 X = ( X n ) n ^ 亦即对每个％ 是多„可测 

的，称为鞅，如果 E | x n | < oo , n > 0,且 E ( X n !#•„_!) = X n _ x . 当最后一个 
等式中的等号换为 E ( X n |^ n _ i ) >或 E ( X n |^ n _!) ^ X n _! 序列 

( X n ) n ^0 相应地称为半鞅或上鞅. 






在涉及到一大批饶有兴趣的随机序列类（例如，可参阅第七章第1节）的过程 
中,鞅论以其丰富的成果而显得非常富足，在概率论,数理统计及其应用的数量 
众多的各个分支之中找到了广泛的应用. 

在这些成果之中首当其冲应当提及的是：关于在时间的随机变换之下鞅性 
保持不变的定理(第 2 节),关于依概率 1 收敛的定理(第 4 节)，最大《概率》与 
“矩” 不等式（第 3 节). 

在关于鞅论的应用方面，有第 10〜13 节中的材料为例，其中涉及了诸 
如: 保险业破产概率问题、“随机金融数学”、以及随机序列的“最佳停时”问题 


>Qzj£r 

寺寺 • 
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除了一系列已经在第八章正文中出现过的关于马尔可夫链的重要概念和符号之 
外，本节还将引入一些新的概念与符号，因为它们出现在了一些新增加的题目中. 

• 如同鞅论一样,我们所考察的取值于某个相空间（私釣的（广义）马尔可夫链 
X = ( X n ) n> Q 是定义在某个滤子概率空间 （ n ， 多， P ) 上的.此处，对 
每个 n > 0,都假定为 ^ n / S 可测的.刻画我们所考察的序列的最基本的假 
定是： 我们的序列具有广义马尔可夫性，即对一切71>0与5€#，都 ( P - a . s .) 


有 


P ( x n+ 1 G B I ^ n )( uj ) = P ( X n+1 6 B I x n )( uj ) 

(往往将 P ( X n+1 € B I X n )( u ;) 写为 P ( X n +1 eB \ X n ( u ))). 

若 a - 代数 = ^ ~ a ( X 0 , X n ), 则所考察的性质为狭义马尔可 

夫性，并说 X = ( X n ) n ^ 0 是马尔可夫链. 

若相空间 （五 ，釣是博雷尔的，则根据第二章第7节定理5,存在正则的条 
件分布 P n ( x ; B ), 使得 （ P - a . s . 地）有 




P ( X n 6 S | X n _ i ( a ;)) = P n ( X n _!( a ;); B ), Be £， n ^ l . 


函数 P n ( x ； B ) 在马尔可夫理论中通常称为（由 E 到#的）转移函数，或马 

尔可夫核.若函数 Pn(x ； B ), n > 1，与 n 无关 （= P { x ; B )), 则相应的（广义的 

或狭义的）马尔可夫链称为齐次的. 
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除了转移函数之外，刻画马尔可夫链的另一个重要特征是初始分布 
B € S : 


7T 


( B ) = P { X 0 e B }, ， 

( tt , Pi , P 2 ,-* )( 在齐次 场合， p )) 完全确定了马尔可夫序列 X = ( X 0 i X lr ^) 
的概率分布. 


7T 


在第八章关于马尔可夫链理论的论述中，我们根据当代的习惯，数次改变观点， 
认为起始的对象不是 （ n ， 多， (^ n ) n ^ o 5 P ) } 以及取值于 E 的多 〆 可测的随机 
变量 A 的序列 X = 其中 CE〆 ） 是相空间，而是由£； 向# 的 

“转移函数”组 （巧， ft ，•■.)，其中 Pn = P n ( x ； b ) 7 xeE , 忍 e 炙而 （ E , 釣是 

某个给定的相空间.（在齐次场合只有一个转移函数 p = p ( x ; 切.）因此，成 
组地构造出（例如，根据依奥涅斯库-图尔其 （ Mo HeCKy Tyjmn) 定理，其中取 
坐标空间作为 （ D, 多 )） 概率测度族{巧， z € 可， 标准地形成给 
定序列 X = ( 為， &,•••)( 若 


(工 0 , 21 ，...)，则 X n ( uj ) = x n ), 它对于每个 

e E ， 关于叉 为马尔可夫的，此时 P x {Xo = x } = l . 如果 TT = BeS , 

是某个“初始”分布，则以 A 表示 ( E ' P ) 上的按如下方式构造的分布: 
P n ( A ) = J P x ( A )7 r ( dx ), 


(J 


X 


B 


关于 A , 序列 X 自然称为由点 z 出发的马尔可夫链（即有 X 0 ( u ) 
( P ,- a . s .)). 关于测度 A ， 序列 X 则称为依 tt 为初始分布的马尔可夫链（亦即 

P^Xo eB}^ Be£). 

为了陈述两个（新的）马尔可夫 性质： 广义马尔可夫性与严马尔可夫性，有益的 
做法是引入移步算子0和它的“幂” 与^ (其中， T 为马尔可夫时). 

算子 t 0^0称为移步算子，如果对每个0；=(邱，別，… ）， 都有 


rr , 




咖）= (^1,^2,* **)• 


换言之，轨道 (^0,^1,'**) 在算子沒的作用下，“移步”为轨道(尤1，怎2，".)■(在 

第五章中，在讨论狭义平稳序列及其相应的动力系统时，也曾引入过 n 到自身 
的映射，当时是用 r 表示的 .） 

以如= } 表示单位的恒等的变换（如 ㈤ ）=⑷，对 n > 1，可以将算子0的 
次幕汐 n 定义为 .•❹ n = ^ n-l o 0(= 6 o U , 亦即 O n ( uj ) — O n ^ i ( B ( uj )). 

若 r 为马尔可夫时 （r < 00)， 则以心表示这样的 算子： 它仅作用在集合 

0 r = {cu : r ( o ?) < oc } 上，且当 

的 a ;, 都有 


71 


时，有 I = ‘，亦即对一切使得 t ( uj ) 


T 


Tl 


= n 




0 r (^) = 0 n (u). 

若丑 = 丑 ( o ;) 为多可测的函数（例如 r = t ( uj ), X m = X m { oj )), 则用 HoO n 
表示函数（丑 )M = H (0 n ( cj )). 
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若 a 为马尔可夫时，则 H O 心仅定义在集合 n a = { uj ： a ( oj ) < oc } 上，且 

当 a ( u ) = n 时，有孖 。I =孖。 I ，亦即若 a ； e { a ( w ) = n }, 贝 U ( 丑。 9 a )( uj ) = 
( Ho 9 n )( u ) = H (9 n ( u )). 

由这些定义，可以特别地推出 


o 0 n =■ X . 


m+n ， 


在集合 Or 上, 


Xm O0 a = X 


m+or 


而若 r 与 a 都是有限马尔可夫时,则 


。沒 <T = ^-ToO 


+ CT - 


与算子 o n ： n -^ n 相对应，可以定义逆算子^ 1 ：多 — 多 为:若 a e 多， 


则 


若将 A 取为集合 { w : XM eB }, Be 则有 


亦即 


(在第八章第2节中，有许多关于算子等等的性质的新的习题 .) 


上面所引入的算子軋可以用来证明（第2节定理 1) 所谓的 推广的马尔可 夫性: 
若 H = H { U ) 为有界的（或非负的) 多 可测函数，则对任何初始分布 7 T 与任何 
>0,都有 


71 


EAHo 6 n \ = E Xn {u;) H (JVa.s .)， 

其中，坟表示对测度 TT 求均值，而 E XnM H 则应理解为先形成函数 狀 X) 
E X H } 再根据定义，将 E Xn{u}) H 理解为 ^( X n ( u )). 

这一推广了的马尔可夫性还可以进一步推广,包括可将其中确定的时刻 
换为有限的马尔可夫时 r . 确切地说，我们有•.若 ( H n ) n ^ 0 为一序列有界的（或 
非负的)多可测函数， T 为有限的马尔可夫时，则由马尔可夫性可推出所谓的严 
马尔可夫性， 其中 包括： 对每个初始分布 7 T ， 都有 


n 


E n ( H T o 0 T I ^)( uj ) = X t { uj ) ( uj )) ( JVa . s .)， 


其中 ，讽 n , x ) = E x H n . 

请注意,应当对。 =( 艮。 l )( u ;) 作这样的理 解：当 t ( oj ) = n 时，有 

( H r oO r )( u ) = ( H n oO n )( cj ). 
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正如上面所已经指出的，在现代理论中，在某个相空间（五，釣中取值的齐次马 
尔可夫链 X = ( X n ) n>0 被其初始分布 7 T = 7 T ( dx ) 与转移函数 P = P ( X] B ), 

E, BeS , 所完全决定.在此,空间 ( E °°, 中的概率分布巧仅由转移函数 
P = P ( x - B ) 决定. 

值得注意的是，转移函数(或称为马尔可夫核）还是数学分析中的另一个分 
支——所 谓位势理论的 基础.因此，毫不奇怪，该理论与齐次马尔可夫链有着 
非比寻常的密切关系，而且这种联系形成了相互促进的局面. 

现在来谈几个无论对于位势理论,还是对于马尔可夫理论，都是重要的与必 
须的问题. 

与转移函数 P 二 p { x \ B ), X e E , B e 有关,作用在函数 0 = 分⑻上的 

(一步）转移线性算子为 


x € 


/ 9(y)P(^dy). 

Je 

(常常写为 （1^)(4.) 作为算子 P 的定义域，人们考察了那些对一切 
得积分 f E g ( y ) P ( x ; dy ) 确定的 S 可测的函数分= g ( x ). 该积分对于非负函数类 
(记为 S +) 或有界函数类 ( 记为 b ⑸) 是确定的. 

以 I 表示单位（恒等）算子（ I 分⑷=分⑷)，我们来引入算子 ( n 步转 移): 
对 n > 1，令 P „ = F ( P n - l ), 或等价地, P n = Pn - l ( P ), 其中 P () = I . 

易知，对于一切使得积分 J E g ( y ) P n { x -, dy ) 确定的可测的函数 g = g(x )， 


Pgf(x) 


都有 


^ ng (^) = E x g ( X n ) y 

其中 p = F n ( x ; dy ) ^ n 步转移概率（参阅第八章第1节). 

若丁为 (关于流 )n >。， 其中多 f = a ( X Q , X u …， A) 的）马尔可夫时， 

则用 P T 表示按如下方式作用在函数9二 〆 幻上的 算子： 


F T g(x) = B x [I(r < oo) 5 f(X r )]. 


我们注意到，若分⑷三 1, 贝！ 1 


P T l( ； r) = P x {r < oo}. 

用算子 P „, n > 0,可以构造（一般说来,是非有界的）算子 


n^O 


称为算子 Pn (或相应的马尔可夫链）的位势. 

若0 则 


% — ^2 ^ n9 

n ^：0 


= (E 十 FU)g, 
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或简单地写为 


U = I + PU, 


函数％ 称为函数 g 的位势 • 

若 W ： r ) = I B ( x ) 是集合 Be 度 的示性函数，则 

UI B ( x ) - E x Ib ( X u ) = E x N b , 


n^O 


其中 TVs 是访问集合丑的次数.当 o ： e 五固定时，函数 U ( x ， B ) = ILTs ⑷是 
在集合上的测度.有时也将这一测度称为 位势- 测度.若 B = 切} 为单 
点集, yeE 7 则将函数 Uix ^ y }) 记为 G ( x , y ), 称为（算子 P 或相应的马尔可夫 
链的）格林函数.格林函数的直观意义是清 楚的： G ( x , y ) = E x N {y} 就是在假设 
X 0 = o ： 之下访问状态 y 的平均访问次数. 

与由算子 P 得到位势 U 的做法类似，也可以按如下公式由转移函数（马尔 

可夫核 )P = P ( x ; B ) 得到核 Q = Q ( x ; B )： 

Q ( x ； B ) = 尸 ( x ; B ) (二 ( I b ( x ) + PQ ( x ； B )). 


n^O 


由于 Pn/s(x) = P n {x] B) f 故显然有 U{x; B) - Q{x; B). 
与算子 p 有关的还有一个重要算子 


L = P — I, 


其中， I 是单位（恒等）算子.在马尔可夫理论中，算子 L 称为（具有转移函 
数 P = P{x; B) 的齐次马尔可夫链的) 生成算子. 算子 L 的定义域氙是使得 
Fg-g 确定的所有#可测的函数9 = 9(4 构成的集合. 

若 h G ^ + (BP / I 是# 可测的非负函数，取值于 S +), 则它的位势 H = Uh 
满足关系式： 


H = h + PH, 

(此因 U = S + FU). 事实上，若九€乳，则丑是泊松方程 


LV = -h 


(在函数类乳中的）解. 

若方程 V = h-hFV 还有解 W e 1+( 或方程 LF 

W e 乳)，则由于 W = h + ¥W ^ h , 故由归纳法可知，对任何 n > 1，都有 

J 2 P k h ， 从而就有 W ^ H , 如此 一来， 在函数类孑 + 中，位势 H = mWt 

k—1 

是方程组 + 的最小解.请记住 vh ( x ) - e x f ： h ( x k ). 


h 还有解，如果 






fc =0 
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设函数/ = f( x ), xeE 属于类孑+,称/对于算子 P 是峰态 的（或对于具有转 
移函数 P = P ( x ； B ) 的马尔可夫链是峰态的，或 P - 峰态的)，如果 


(或写为 E x /( Xi ) ^ f ( x ), x G F ). 

根据这一定义，函数 he ^ + 的位势 H = m 是峰态的函数. 
类巧+中的函数/ = /( ㈡ 称为调和的（或不变的)，如果 

F/ = / 


(亦即 E x f ( X 1 ) = f ( x ), xeE ). 

在位势理论(其中的概念之一是峰态性）与概率论(确切地说，鞅论）之间的 
联系之一可以直观地表述为如下 命题: 如果 X = ( X n ) n>0 是马尔可夫链,具有初 
始分布 7 T 以及 ( E ' 中由分布仏生成的转移函数 P = P { x ; B ) 的马尔可 
夫链，而/ = /⑷是 P - 峰态的函数，则序列匕= f { X n \ Y ^{ Y ny ^, P n ) n ^ 0 
是“非负定上鞅” 序列： 


K 为式 f - 可测 ， n >0， 

E 7 r ( Y n + i \^^ : ) ^ Y n iVa . s . n > 0. 


如果还有 Ey n < 

有趣的是，这样的“非负定上鞅”序列 r 保持了非负上鞅的性质（参阅第 
七章第 4 节定理 1): 概率 A 为 1 地存在极限 limy n (= 且若 P n {Yo 

oc } = 1，则< 00 } 二 1. (该结论的证明见 i 七章第4节第24题 .） 

(属于类釘或孑+的）非负函数 h &⑷的位势 H ( x ) = Uh ( x ) 满足关系式 

H ㈤ = h ( x )- hPff ( x ) t 由此可以推出 


>0,那么该序列就是（通常意义下的）上鞅. 


OO , n 


< 


H ( x ) > max ( h ( x )^ FH ( x)) y xeE . 

这表明，函数 MW 的位势 H ( x) y 一方面控制着该函数（意即1?⑻> h ⑷ 

E ), 另一方面，还是峰态的.换句话说，函数 h (: r ) 的位势 H ( x ) 是其峰态控制函 
数的例子.在许多场合下（例如在考察最优停时的问题中，参阅第八章第9节), 
存在着寻找关于，可测的非负函数 g = 〆 $)的最小峰态控制函数的问题. 

位势理论以下述方式回答了这个问题. 

引入算子 Q 以下述方式作用在函数 p = pOr ) 上： 

Qp (: r ) = max ( g ( x ), P ^( rc )). 

函数 〆 x ) 的最小峰态控制函数 < a :) 即可按照下述公式 求出： 

s (>) = lim Q n g ( x ), 


x e 


? 




§ 7 . 马尔可夫链 


- 339 • 


在此有 


5(工）= 


(沒 ⑷， Ps ⑷）， xeE . 


max 


由这一等式，特别地，可知：若 s e 汍，则 


bs ( x ) = 0, 


s { x ) = g { x ), x G Dg, 


x 


其中， C 9 ^{ x ： s ( x ) > g ( x )}, D g ^ E \ C g . (该证明可见第八章第 9 节，在那里， 
P 用 r 表示，而 Q 则写为 Q .) 

位势理论对关于算子 P 的狄利克雷问题的解的刻画问题给予了极大的关注“从 
某个函数类,例如， 1+， 4滅，等等之中）寻找非负函数 F = V ( x ), xeE ,^ 


得 


FV ( x ) + h ( x ) } x e Cj 


V ( x ) 


9 ⑷， 


x e D . 


其中 C 是 E 中的某个给定的子集（通常称为呕域 ”), D = E \ C , 而 h 与 P 亦 
为给定的#可测的非负函数. 

若仅考察属于乳的解 F ， 则所列的方程组等价于 


bV ( x ) = - h ( x ), 

V ⑻=0⑷， 


x eC , 
x e D t 


方程 LF = -/ i 称为区 域 C 中 的泊松 方程,并且通常说到狄利克雷问题，总是 

意味着,在区域 C 中求这个方程解，而在 区域乃 中则等于预先给定的函数 

令人印象深刻的是，所陈述的（非概率的）狄利克雷问题，在考虑了具有转 
移函数 P = P ( X ； B ) 的马尔可夫链，并根据其构造出算子 P 之后，得以顺利解 




9. 


决. 




设 X = { X n ) n >0 为这样的马尔可夫链， t ( D ) = inf { n >0: G D }. (jiP 

同通常，若 {.} = 0，则 r ( D ) = oo .) 

可以断言，若 h 与 p 属于类孑+,则狄利克雷问题的解存在，并且最小非负 
解 V D ( x ) 由下式 给出： 


r(D)-l 

V D ( x ) = E ^[/( r ( D ) < oo ) g ( X T{D) )} + I c { x)^ x h (D . 


k =0 


(关于这一结果的证明的提示参阅第八章第 8 节第11题 .) 

我们指出若干特殊 情形： 
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( a ) 若 /I = 0,则所找的函数 y = V { x ) 在区域 C 中是调和的，在区域 D 中 
等于函数 P ， 故最小非负解 V D ( x ) 由下式 给出： 


Vd ( x )^ E x [7( r ( D ) < oo ) p ( X r(D) )]. 


特另 1 J 地，若 〆 怎） 三1， a ： e 贝 u 


Vd(X) = Pa ： {r(i>) < oo}. 

事实上，在由方程状态=工出发的假设下，迟早到达集合乃的概率 
P x { r ( D ) < 00 } (在区域 C 内）是调和 函数. 易知，若 : r e A 则 ^ x { r ( D ) 

00 } = 1,因为此时 t ( D ) = 0. 

( b ) 若 〆 ; r ) = 0 ，: c € £?，且 h ( x ) = 1， x e C , 则所考察的方程组为 


< 


¥ V ( x ) + 1， xec , 

x e D 


V ( x ) = 


0, 


此时可得其最小非负解为 


r(D)-l 

Vd { x ) — Ic(^)^x E 1 


Ea ： r(i^), X e 

x e D . 


0, 


fe=0 


如此一来,首次到达集合 D 的时刻的数学期望 E x r ( D ) 就是所列方程组的最小 
非负解. 

在描述相空间 （A #) 中的随机游动的马尔可夫类序列中，在 


E = Z d =： {0, 土 1, 土 2,...} 


d 


中的简单对称随机游动，亦即沿着整数格子点的随机游动，起着特别的作用, 
其中 d = 1，2, … (参阅第八章第8节).这种（在“整个”空间 E 中的）随 
机游动 X = ( X n ) n>0 可以构造性地给出，令 


= 丨 + (1 +…+ 《n 


其中，在某个概率空间 （ A 多, P ) 上给出的 d 维随机向量$1，匕…是独立同分 
布的，有 


P {6 = e } = (2 d 广 

(其中 e = ( ei ，• •.， ed ) 是空间中的标准基单位向量，亦即 ei = 0, -1或1,且 
|| e || - | ei | + -.* + | e d | = 1). 这种始于点 x e Z d 的随机游动 X = { X n ) n>0 的特 

征是,游动的“质点”自每个状态均等概率地转移到 2 d 个最近邻的整点之上. 
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此时相应的算子 p . 的构造非常 简单： 

Ff(x) = B x f{x + Ci) = ^ 5Z /( x + e ). 

M=i 

此时将相应的算子 L = P - 正称为（离散的)拉普拉斯算子，并记为 A ， 易见有 

△/ ㈤ =‘ (f ( x + e ) - /⑷). 


M =1 


上面所说到的狄利克雷问题对于所考察的简单随机游动自然会有某些变化，值 
得注意的是，离幵区域 ccz d 时只能落在边界集合 

eZ d , x^C 且对某个 y e C ， 有 || a ： — y || = 1}. 

这种情况导致（关于泊松方程）的狄利克雷问题此时的标准形 式为: 对于给定的 

区域 C g 妒和给定的函数 /I = h ( x) y z e C 与沒= g { x ), X e dC , 寻找函数 
v = V ( x ), 使得 


QC z=z {a ； 


: x 


AV ( x ) = — h ( x ) 

v ㈤ = 分 ㈤ ， 

若区域 C 为有限个点构成的，则对一切 z e C ， 都有 P x { r ( dC ) < 00 } = 1，其中 
r ( dC ) = inf{n > 0 : X n € 0 C } (参阅第八章第8节第12题).这使得可用上面 
所说到的方法证明，所考察的问题的唯一解，由下式 给出： ^ xeCKJdC ^ 


x e C , 
x G dC . 


r(dC)-l 


E h ^) * 


Vdc(x) = ^ x g{X T (dC)) + /c(^)E 


k=0 


(由于区域 c 为有限的，故无需假定 w 幻与 〆 4 为非负函数 .） 

特别地,若 /I = 0,则在区域 C 中调和，且当 x e 时等于 〆 a ：) 的唯一函 


数是: 


Vdci ^) — ^ x 9{^ T ( dC ))- 

下面来引述关于如下的齐次狄利克雷问题的一些 结果: 在非有界区域 C 中, 

AV ( x ) = 0, 

V ( x ) — g ( x)j 


x e 

x G dC . 


若 d 彡2,则根据波利亚定理（第八章第8节)，有 P x { r ( dC ) < 00 } = 1，并 
且 C 为有限区域时的方法仍适用于此，故可得到如下结果：当 p = p ( x ) 为有界 
函数时，则在 CU 8 C 中为有界类的解集中，存在着唯一的解，其形式与上面的 
相同 ，即： 




Vdc(^) = E x ^(X r ^c))* 
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必须指出，即使在 9 为有界函数时，我们的问题的解也可能为（不是一 

个）非有界解.典型的例子如下. 

设 d 二 1， C = Z \{ 0 }, 意即 3(7 = { 0 }. 令 g ⑼= 0 ,则易见，任何无界函数 

V ( x ) = ax , a G R , 都是狄利克雷问题 ( AF ( x ) = 0, x ^ Z \{0}， 且 F (0 )= 沒⑼) 


的解. 


若 d 彡3,则狄利克雷问题 ( AF ( x ) = 0, rr G C , 且 = g ( x ), x e dC ) 

的有界函数解的存在性与唯一性问题，本质上取决于是否对一切 Z e (7,都有 
Px { r (0 C ) < 00 } = 1. 若该条件满足，则在有界函数类中，解存在且 唯一， 具有 
形式：对一切 xeCUdC ,^ V dC ( x ) = E x5 ( X T(aC )). 

而若条件 P x { r ( 0C ) < 00 } = 1 , x eC , 不满足，则(在分= 5 ⑻，丨 G 犯，为 
有界函数的场合下）狄利克雷问题 ( AF ( x ) = 0, x € C , _& y ( x ) = g ( x ), x e dC ) 
的所有有界解均具有如下形式： 


V dC ( x ) = E x [/( r ( aC ) < oo ) 5 ( X T ㈣ )]+ aPx { r ( OC ) - do }, 


其中， aen . (参阅，例如， [75] 定理 1.4.9.) 

在(第八章）阐述具有可数状态集合的马尔可夫链的分类问题时，我们摆脱了 30 
年代（柯尔莫戈洛夫，弗雷歇，道博林等）的那种最为复杂的局面，一种自然的分 
类方式，一方面应当由其转移概率矩阵的代数性质所决定，另一方面，也取决于 
其转移概率随时间增长时的渐近性状. 

从那时起，由其转移概率的代数性质所决定的如下的一些 概念： 

本质与非本质状态， 

可达状态与连通状态， 

不可约类与循环类， 

与由其转移概率的极限性状所决定的如下的一些概念： 

自返性与非自返性， 

正定状态与零状态， 

不变（平稳）分布， 

遍历分布与遍历定理， 

成为了马尔可夫链理论中所集中研究的标准概念. 

现在已经越来越清楚，关于渐近性质的研究在与位势理论的概念相结合后 
更为方便，对于后者的基本概念（位势，调和函数，峰态函数,… ） 前面已做了介 


绍. 


从第八章的阐述中可见,在对于马尔可夫链极限性状的研究中，所谓“再生 
循环”法已经逐渐成为最基本的工具，作为该方法基础的是如下的观察. 
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设 X 是 E 中的某个状态.定义再生马尔可夫时序列 如下： 令 


，其中 


0 


= 0 , 


a x = 


a 


= inf {n > 0 ： X n = x }, 


再归纳式地，对 fc > 2 ,在 


的集合上，令 


k-l 


< OO 


a 


k 


Ai—l . 


=inf {n > 


* -^-n = * 


<T 


a 


换言之，即有 


k-l 


i , 如果 


fc_i 


+ ( T x oB 


<00 


a 


a 


k 


a 


如果 


fc — 1 


a 


如下的性质说明了名称“再生时刻”与术语“再生循环”的含义： 

1 ) 在集合< oo } 上，有 X 

2) 在集合 K 上，序列（ X 中丄列(关于测度 PJ 与(為,^，…， 
^- l ) 独立； 

3) 若对一切都有 a ^) < oo , 则序列（义 4 + 71 ) 0 0 的 Par 分布与 

序列 ( X n ) n ^ 0 的分布 相同； ^ 

4) 若对一切 o ; G 五 00 都有 0(0；) < oo , 则“再生循环” 


fc = X ： 






— 1 


+ 1 ， 


是 Pf 独立的； 

5 ) P x { cr ^ < 00} = Px {^ x _1 < CX)}Px{^x < OO}, 因而 < OO }= 

6 ) 若凡 =E I { x } ( X n ) (= N { x } 即处于状态: c 的时刻数目)，则平均数目 

n^0 

^ X N X (= B x N{ x y = G ( x , x )) 满足下式： 

H = 1 + [ < 00 } = 1 + y^[P x {tr x < oo}j n ; 

n^l 


n^l 


7) 由上式推出 


< 00 } < 1 公 E x iV x < 00 


^ x{^x = 00 } = 1 , 
Px{^4 < OO} = 1; 


= 00 <=> 




8 ) 对于 y 爹 X ， 有 


G [ x ， y ) = P x { cr y < oo } G { y , y ), 
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亦即有 


Ex-A/y — P;c{0"y < 00}EyiVy; 

9) 若对一切 fc > 1,都有 P x Wx < 00 } = 1,则由再生区间长度构成的序列 

)^0 为独立同分布的随机变量序列. 

我们记得，根据第 /V 章第5节中的定义， 状态 : r e 称为 

自返的， 

非自返的， 如果 P x { a x < 00 } < 1. 


k 


k 一 1 




— (T 


如果 P X {( T X < OO } = 1 ? 


既然 


P x { a x < 00 } = 1 

< 00 } 二 1 


Px { X n 


i . O .} = 1， 

i . O .} = 0 




=x 


= X 


(第八章第 5 节定理1)，所以状态 X e E 是 

自返的， 

非自返的， 如果 i .0.} = 0. 


如果 P x {^n — X L 0.} = 1， 


LO .} = 1”与 “ P x { X n = z i . O .} = 0” 对于诠释“自返性”与 


(性质 U Px { X n 

“非自返性”，比 “ Px {〜 < 00 } = 1 ”与 U Px{^x < 00 } < 1 ”更为贴切，若能将它 
们分别理 解为： “在每次访问状态 Z 之后还能再回来”与“在某次访问状态 Z 之 


X 


后不再回来”的话 

事实上，状态 Z 的自返性等价于下列性质中的任何 一个: 


P x { X n = x i . O .} = 1 或 I * X { N X = 00 } = 1 或 E x iV x = 

而状态 z 的非自返性则等价于下列性质中的任何 一个： 

Pa：{Xn = x i *0.} = 0或 P x { iV x < oo } = 1 或 E x iV x < 

回到位势理论，尤其是回到“再生循环”概念，我们就可以对具有可数状态集合 

的马尔可夫链的不变测度（或称平稳测度）与分布（即概率测度）的结构问题给 
出一个详尽的回答了. 

我们记得，对每个转移概率矩阵 P = \\p X yl x ^ yeE 和函数/ e 嵙,都有一 
个线性算子 P / 与它们相联系，它以如下的方式作用在非负函数/ = f ( x ) } xeE 


00 


OO . 


上: 


( Ff )( x ) = ^ Pxy /( y ), 

yEE 

(即按法则（矩阵 p ) ③(列向量 /)=( 列向量 P /)). 

设 g = q ( A ), ACE 为可数集合 E 的子集 A 上的非退化的测度（即不恒 
等于0或无穷).这样的测度显然完全被它在各个单点集伽}, x e E 上的值 
q ({ xi }) 所确定 • （为方便起见，将 q ^ Xi }) 简写为 q ( Xi ).) 


x £ E 
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以义 + 表示所有这样的测度 g 的集合，以 qP 表示按如下方式将 J + 中的 
测度变为义+中的测度的线性算子： 


^ F ( y ) = 

x€E 

(即按法则（行向量矩阵 p )=( 行向量 #).) 

测度 g G 称为关于具有算子 P 的马尔可夫链是不变的（平稳的)，如果 

qF ^ q . 如果测度 qe ^ + 使得# < %则它称为峰态的，或 P - 峰态的. 

在位势理论中，对于/ e #+和 g e 為还引入了如下形式的双线性 算子： 

(Qy f ) = ㈤ / ㈤ - 


y 


不难验证，该双线性算子具有如下所示的对偶性: 


〈％!?/> =〈#，/〉， 


即允许将“作用在函数上的算子”变换为“作用在测度上的算子”. 

第八章第6节定理2证明了，如果（具有可数状态集合）的马尔可夫链仅 
存在一个不可约正定自返类，那么不变分布存在、 唯一， 且有 


q ( x ) = [EajCT*] -1 , X e E , 


其中％ = inf {n > 1 : X n = x } 为首次返回状态; c 的时刻.（注意，此时我们有 

1 彡 < 00, x e E.) 

正如下面所要证明的，利用第一个再生循环的特征，对于任意一个不可约 
的自返马尔可夫链，无需假设其状态的正定性，均可得到其不变集合的存在性 
与结构. 


亦即有如下的断言. 

任何具有可数相空间 E 的不可约自返的马尔可夫链 X = { X n ) n ^ 都有不 
变测度殳= g (乂)， Ace , 其中 q ( E ) > 0且 q ( E ) ^ oo (“ 非平凡性”)，且对任何 
状态 xeE , 都有0 < q ( x ) 


本测度除了所乘的常数因子之外是唯一确定 


< oo . 


的 ■ 


为证这一结论，只需证明测度 


q °( x )= E x o J 2 〜 ㈤ ， 


k=0 


除专门条件 q °( x ^) = 1之外，是唯一的非平凡不变测度，其中 
X n = x °}. 


= inf {n ^ 1 : 


a 
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为证该测度/事实上是不变的（这也就证明了不变测度的存在性)，只需 
对任何函数/ 6 ( T +， 证明 


( q ° F , /) = ( q \ /). 

(利用第八章第2节第13题中推广的严马尔可夫性）通过下面的一系列运算， 
即可证得这一等式的正确性： 


-1 


( q °^ f ) = ( q \ P /) - E x . J 2 ( P /)( 為） 

_ k =0 

^2 E x o [I{ k< a x o >Ex fe f(Xi)} = 


E E 々/ ⑹ 


=E 


k =0 • 


fc^O 


k^O 


E x o { E^o [^{ kKa^o }f ° ^ k \^ k \} = > : E x 。 [ I ^ kKa^o }f ° ^ k ] 




k^O 


k^O 


-1 


Ex 。 〉 ： ~^|fc<a ： E 。 }/ ( 义 fc+l ) = E x 。 E/(X，)| =E x o I 肌 ) 

- Jfc=0 


fc^O 


■ i=l 


〈 〆，/〉■ 


所构造出的以 q °{ x °) = 1 为标志条件的测度 g 。 对一切 xeE , 都满足性质 
0 < q ( x ) < 00 . 关于这 一点， 可以由下面的峰态测度的性质直接推出. 

设马尔可夫链为不可约的，而测度 qe ^ 是峰态的 （gP < g ). 则若对某 
个状态: r ° e 五,有值 q { x °) = 0 ( 值 q { x °) < oo ), 那么对一切 x G E ， 就都有值 
g ( x ) = 0 ( 值 g ( x ) < oo )* 

事实上,对一切; r 笋 X 。，都存在 n ^ 1,使得 p =。 > 0,然而 

q ( x °) > X ^) p H 。 > ^( x ) pi %^ 

yeE 


由此即得所证. 

现证 测度扩 是唯一的非平凡的不变测度.为此，假设 g 是峰态的（特别地， 
是不变的）测度，对一切 x e E ， 都有0 < g (: r ) < 00.令 


q( x ) 


f { x ) — 


g 0 ⑻’ 


= 


并定义（与 Pw 对偶的）函数 P 


由于 


^ 5 y 


Q°(x) 






，y 


g °( x ) 


Q°(x) 


y€：E 


y€E 


故可见 P = || 良 ， y || 就是转移概率矩阵.并且，对于矩阵 p = || p Xjy || 和函数 
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q ( x ) 


我们有 


f { x ) ~ 


g 0 ⑻ 


q(v) 


g 0 ( y ) n < i ( y ) 

q °(^) y ， X Q °( y ) 


P /( x ) = Px , yf { y ) — Px 


E 


.2 / 


Q °{ y ) 


y€E 


y€E 


y&E 


g(x) 


油) = 


=/(工). 


Q°( x ) 


Q °(^) 


y€E 


事实上，函数 / = / ⑻是 P - 调和的.又由于由函数= $^ Py , x 的定义可以 
推出： 对任何 n > 1，都有 


Q °{ y ) 


p^l 


pi % 


矿⑻ 


所以 


Q °( y ) 


G { x , y ) = 


G ( y ^)- 


q °( x ) 


由上述两个关系式可以 推知： 若具有算子 P 的马氏链 X = ( X n ) n>0 是不可 
约的和自返的，那么具有算子菸的对偶马氏链 X = ( X n ) n>0 就也是不可约的 
和自返的.但若函数/ = /⑻是（非负）峰态（特别地，是调和的）函数，则 
对于任何初始分布 7 T , 序列 ( f ( X n )) n ^ o 都关于测度化为非负定上鞅.这一 
性质曾经在上面指出过.在那里我们还提到过,这样的序列 ^ r - a . S . 地存在极限 
lim X n (- Xoc ), 因此，也就存在极限 li^i f ( X n ). 若马氏链是不可约与自返的, 

贝 7 11对任二状态 x 与 y 妾 x , X n 都无限基次地取值％也无限多次地取值 y . 这 

就意味着 /($) = f [ y )， 从而我们证得了 /($) 三 const . 

总而言之,我们已经证得了，任何别的满足条件0 < 以岣< 

变分布 A 同 f 的区别仅在于所乘的正的常数. 

由所证的结果不难推出前面所提到过的关于不可约正定自返马尔可夫链 

E ) 具有结构： q °( x ) 二 




eE 的不 


oo , X 


的如下性质：唯一的不变概率分布 g ° ( q °( x ) 

[ E x a x ]^,xe E . 


x e 




再谈一谈关于具有可数状态集合的马尔可夫链的一些遍历性定理，亦即当 
时，形如 7 ； n E f { X k ) 的量,或者，更为广泛的，对于某些类型的函数 f 与 9 , 


n 


oo 


k=0 


形如 


J2f(Xk)/J29{Xk) 


k —0 


k =0 


的量的几乎必然收敛性的定理.与上面一样，此处最好是考察再生循环. 

设 X = ( X n ) n ^ 0 是不可约自返的马尔可夫链,具有可数状态集合丑和这 
样的不变测度 q °( x ): 对一切 xeE , 都有0 < q °{ x ) < oo, 且对某个固定的: r 。， 

有 q °{ x °) = 1. 
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设函数/ = /(: c ) 与 g =贞岣均属于类 P ( g °)， 即有 E \ f ( x )\ q °( x ) 

与 E ㈤ k 0 ⑻ < 00.令 


<00 


xeE 


x£E 


m+1 


一 1 


>o - E /( 為)，及 f(D 卜 


k=a 


k=0 


根据不变测度#的定义，有 


E , F 0 - ( q °, /), 

且（根据马尔可夫性）对任何初始分布 7 T ， 都有 

= EJEx ❽ {Yo)) = E x oY 0 = (q% /). 

事实上，关于测度 IV 随机变量圪 F 2 , …是独立同分布的，有 E , F m = ( q °, f ) 
(< OO ). 所以，由强大数律可知，（对于任何 7 T , 都•地）有 


E 


(T 


/(^°) 


n fc=o n 71 

又在0。， 5)^0 的假设之下，（对于任何 tt , 都 Pra . S . 地）有 


^ ( q °, />, 


n — > oo 


n 


a 


E 肌) 


( q °, /) 


fc =0 


(Pfa.s ，) ， 


n —^ oo* 


(9°, 9) 


<^Lo 


E g(Xk) 


k=Q 


若记略 =E /( x fc = x °), 则由马氏链的自返性知 

故由上述收敛性即可得出关于比值的遍历性 定理： 当 


( PTr - a . S .) 


— OO 


, n — > oo . 


< n < cr 


^0+1 


由于 


cr 


x 


X 


时，有 


n oo 


E f(Xk) 


( q \ f ) 


fc =0 


(P^-a.s.). 


{d 


E 9{X h ) 

k =0 

假若所考察的马氏链是不可约正定自返的，那么由于此时可将测度#换为概率 
分布 7T 。 = (7 T °( x ), X € E ), 其中 7 T °( x ) = l /( E x tr x ), 所以我们可以特别地得到关 

于这样的马氏链的如下形式的遍历性定理： 

^ J ( X k 、— ( n ' f ) ( P .- a - s .), 

tl r ^ 


n —► oo 


fc=Q 


其中 TT 为任意的初始分布（特别地,可将其取为 7 T °). 
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名词索引 


A 


伯努利移动， (5.3.7) 
不等式 


义-积分， (3.3.15 注) ① 

“奥米咖平方”统计量， （ 3.13.5) 


C r 不等式， (2.6.72) 

埃特麦迪不等式， (4.2.22) 

奥坦韦安尼不等式， (7.3.3) 

邦费尔罗尼不等式， （ 1.1.15) 
贝尔不等式， (1.4.15) 

贝里-埃森不等式， (2.12.43) 

本特古斯不等式， (7.3.26) 

伯恩斯坦不等式， （ 4.5.12 提示） 
伯克霍尔德不等式， (7.3.19) 

博雷尔不等式， (2.13.22) 

布尔不等式， （1.1.11) 

德沃里茨基不等式， （7.3.7) 

杜布指数型不等式 , (7.3.9) 

弗雷歇不等式， （ 1.1.15) 

弗雷谢-霍夫丁不等式， (3.8.10) 

冈贝尔不等式， (1.1.15) 

高斯不 等式， (2.6.80) 

格朗沃尔-贝尔曼不等式， (2.6.51) 
古尼阿斯不等式， (1.1.11) 

关于条件数学期望的延森不等式， 

(2.7.5) 

哈伊克-雷尼不等式， （ 7.3.8) 

霍夫丁不等式， (4.5.15) 


B 


( S , S )- 市场 

( B ， 市场在弱意义下是无套利的， 

(7.11.7) 

( B , 市场在强意义下是无套利的, 

(7.11.7) 

贝特朗悖论， （ 2.3.33) 

变差序列， （ 1.12.8) 


变换 


埃绍尔变换，（附录 .3) 

伯努利变换， （5.3.7) 

梅林变换 

测度的梅林变换， （3.9.11) 

试验的梅林变换， (3.9.11) 

柯尔莫戈洛夫变换， （5.3.8) 

拉普拉斯变换，（2.6.32,附录 ,3) 

非负随机变量的拉普拉斯变换, 
(2.12.26) 

标准差（标准偏差)，（附录 . 3) 


① 3.3.15 表示第三章第 3 节第 15 题，注表 
示在该题的注释中 


译者注. 
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霍夫丁-阿佐姆不等式， （7.3.1 S ⑷） 

吉布斯不等式， (1.5.11) 

坎泰利不等式， (2.6.47) 

柯尔莫戈洛夫单边不等式， (2)(4.2.5) 
柯尔莫戈洛夫-罗扎诺夫不等式， 

(6.3.6) 

柯尔莫戈洛夫指数型不等式， (4.2.23) 

柯西-布尼亚科夫斯基矩阵不等式， 

(2.8.33) 

克拉默不等式， (2.12.42) 

拉奥-克拉默不等式， (2.13.32( b )) 

拉德马赫-梅尼绍夫不等式， (7.3.23) 
拉伊科夫不等式， (2.12.21) 

莱维不等式， （4.4.5) 

雷尼不等式， (1.5.12) 

马钦凯维奇-济格蒙德不等式， (7.3.22) 
佩利-济格蒙德不等式， (2.6.46( c )) 
普罗霍洛夫不等式， (4.4.8) 

切比雪夫不等式， (2.6.55) 

二维切比雪夫不等式， (1.5.1) 

切尔诺夫不等式， （4.5.12) 

斯科罗霍德不等式， (4.4.16) 

斯列皮杨不等式， (2.13.3) 

杨不等式， (2.6.52, 2.8.42) 

钟开莱-爱尔迪希不等式 s (1.1.11) 
最大不等式， (1.11.12, 4.5.13, 7.3.13, 

7.3.15) 

不完全贝塔函数， (2.8.79) 

不完全阶乘， （1.1.2) 

布朗运动 


高斯测度， （5.3.11) 
计数测度， (2.6.56) 
弥漫测度， (2.3.35) 
平稳测度，（附录 .7) 
位势测度，（附录 .7) 
原子测度， (2.3.35) 

测度的支撑，（附录 .2) 
长尾， (2.8.82) 


D 


单射, (1.2.15) 
德摩根法则， (1.1.1) 


定理 


毕达哥拉斯定理， (2.11.4) 

布塔尔-汗-萨克斯定理， (2.1.27) 

达尔穆亚-斯基托维奇定理， (2.13.44) 
冯.诺依曼遍历定理， （5.3.9) 

关于正则性的博雷尔定理， (5.3.10) 
赫利-布雷定理， (3.1.11) 

检验定理， (8.9.7) 

莱维定理， (2.6,38) 

鲁金定理， (2.10.37) 

■ 

默瑟定理， (2.13.11) 

庞加莱定理， (1.1.12) 

切尔诺夫定理， （4.5.5) 

乌拉姆定理， （3.2.4) 

叶戈罗夫定理， (2.10.36) 

约内斯库-图尔其定理， (8.9.7) 


独立性 


事件的独立性，（附录 .2) 

子集类的独立性，（附录 .2) 

对称差， (1.4.1) 

对角线所作的三角形剖分， (1.1.5( b )) 
多项式 


断口布朗运动， (2.13.43) 
分数布朗运动， (2.13.43) 
布朗运动的自模性， （2.13.15) 


C 


阿贝尔多项式，（附录 .3) 
埃尔米特多项式，（附录$ 
伯努利多项式，（附录 .3) 
欧拉多项式,（附录 .3) 

谢费尔多项式，（附录 .3) 
多项式系数， (1.2.12) 


测度 


标准测度， (3.9.10) 
不变测度，（附录 .7) 
非原子测度， (2.3.35) 
峰态测度，（附录 .7) 
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E 


冈贝尔分布， （ 2 .8.48( a )) 

极值分布，（2.8,48注） 

逻辑斯 it 分布， (3.6.24) 

帕雷托分布 

离散的帕雷托分布， (2.8.85) 
连续的帕雷托 分布， (3.6.23) 
帕斯卡分布， (2.8. B 4) 

瑞利分布， (2.8.13) 

三角形分布， (3.6.10) 

随机变量的分布，（附录 .2) 

韦布尔分布， (2.8.17( a ), 2.8.48( a )) 
分布的峰点， (2.6.80) 

分布的众数， (2.6.80) 

分布函数的反函数， (3.8.8) 

分布之间的距离， (3.13.7) 

多布鲁申 距离， (3.13.8) 

瓦塞尔斯坦距离， (3.13.7) 

分割类，（附录 .1) 


二次变型， (7.3.18) 

二进制单位 ( BIT ), (1.8.7 注) 
二项矩，（附录 .3) 

二项系数， (1.1.3) 

二元运算， (8.1.14) 


F 


范德蒙德卷积，（附录 .3) 

范德蒙德多项卷积， (1.2.12) 
范德蒙德二项卷积，（1.2.2, 1.2.22) 
方差，（附录 .3) 

关于分割的条件方差， (1.8.2) 

样本方差， (2.8.20) 


方程 


泊松方程，（附录 .7) 

福克尔-普朗克方程， (1.6.7) 
更新方程， (2.9.6) 

柯尔莫戈洛夫前向方程， (1.6.7) 


分解 


方法 


克里克伯格分解， （7.3.2) 
里斯分解， (7.1.26, 8.2.21) 
分数阶导数， (2.12.44) 

分位点函数 s (3.8.8 注） 

分位数， (3.13.9) 


克拉默-沃尔德方法， (3.3.9) 
再生循环法，（附录 .7) 

非负上鞅序列， (7.4.24) 

非降路径， （1.1.3( d )，1.2,14) 


分布 


边缘分布， (2.8.63) 

泊松分布 

复合泊松分布， （3.6.19) 

广义泊松分布， (3.6.19) 

双向泊松分布， （3.6.21) 

初始分布，（附录 .7) 

狄利克雷分布， (2.8.65) 

对数正态分布， (2.8,67) 

多元贝塔分布， (2.8.65) 

二重指数分布， (2.8.17( b ), 2.8.48( a )) 
反二项分布， （2.8,84) 

反正弦分布， (2.13.39( c )) 

弗雷歇分布， (2.8.48( a )) 

负二项分布， (2.8.84) 

概率分布，（附录 .2) 


G 


伽玛函数， (2.8.80) 
概率空间 


滤子概率空间，（附录 .6) 
普适概率空间， (2.9.1) 
完备概率空间， （2.2.34) 
概率-统计试验， (3.9.9) 

公式 


邦费尔罗尼公式， (1.1.14) 

华林公式， (1.1.13) 

并与交的概率容斥公式，（1.1.12, 1.4.9) 

三个事件之并的示性函数的容斥 
公式， (1-4.2) 

随机变量最大值的容斥公式， 
(2.8.77) 


名词索引 


- 359 . 


分布函数，（附录 ,2) 

分位点函数， （3.8.8 注） 

峰态函数，（附录 .7) 

伽玛函数， (2.8.80) 

格林函数，（附录 .7) 

截断函数， (3.6.17) 

拉德马赫函数， (2.11.6) 

母函数 

数列的母函数，（附录 .3) 
随机变量的母函数，（附录 .3) 
指数型母函数，（附录 ,3) 

浓度函数， (2.8.66) 

欧拉函数， (2.3.25) 

上调和函数， (8.9.4) 

特征函数，（附录 .3) 

完全单调函数， (2.12.26) 

协方差函数，（附录； 

转移函数，（附录 .7) 

函数的连续区间， （2.12.4) 


有限个集合的并与交的概率容斥公 

式， (1.1.12) 

多宾斯基公式，（附录 .3) 

伊藤公式的离散版本， (7.9) 

康贝尔公式， (7.10.13) 

莱布尼茨公式， (1.1.23) 

逆转公式（反演公式)， (2.12.34) 

多元逆转公式（反演公式)， （2.12.4) 
帕塞瓦尔公式， (2.12.27) 

庞加莱公式， (1.1.12) 

塞格+尔莫戈洛夫公式， (6.6.2) 
斯特林公式， （1.2.31, 1.3.16, 8.8.1( d )) 
田中公式的离散版本， (7.9.8) 

霍夫丁公式, (3.9.18) 

关于黎曼 C - 函数的欧拉公式， （2.3.24) 
关于欧拉函数的欧拉公式， (2.3.25) 


估计 


伯恩斯坦估计, （ 1.5.4) 
非线性估计， (6.5.3) 

极大似然估计， （ 6.4.3) 
线性估计， （ 6.5.3) 

有效估计， (2.13.32(b)) 
广义马尔可夫性，（附录 .7) 
广义逆矩阵， (2.13.6) 


核 


马尔可夫核，（附录 .7) 
费耶尔核， (6.2.4) 


恒等式 


超几何恒等式，（附录 .3) 
二项恒 等式， (1.2.1) 

范德蒙德恒等式, (1.2.1) 
廖尔伦德恒等式， (1.2.1) 
庞加莱恒等式， （1.1.12) 
斯皮策恒等式， (2.6.34) 


过程 


奥恩斯坦-乌伦贝克过程， （2.13.18) 
高尔顿-沃森过程， (8.5.18) 

格子点更新过程， (7.2.20) 

非齐次泊松过程， (7.10.12) 


H 


J 


函数 


积分 


V 调和函数, (7.1.9) 

峰态函数， (7.1.9) 

4-可积函数， (3.3.15 注) 
贝塞尔函数，（附录 .3) 
贝塔函数， (2.8.79) 

不变函数，（附录 .7) 

狄利克雷函数， （2.6.11) 
调和函数，（8.9.4,附录 .7) 


a - 阶海林格积分， (3.9.9) 
勒贝格积分， (2.6.40) 
黎曼积分， (2.6.40) 
积分换元法， （2.6.15) 

集合，（附录_1) 

完备集， (2.3.7) 

集合的分割，（附录 .1) 

集合的密度， (2.2.33) 
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纪录时， (8.1.17) 

阶乘矩 } (2.8.49, 附录 .3) 

n 阶阶乘矩，（附录 .3) 
阶梯时刻， (2.6.84) 

阶梯指数， (2.6.84) 

局部时， (1.10.11) (7.9.8 注) 


辛钦大数定律， (3.3.10) 
反正弦律， (1.10.4) 

稀有事件定律， (3.6.20) 


M 


马尔可夫核，（附录 .7) 

马尔可夫链 

r - 阶马尔可夫链， （8.1.13) 
可逆马尔可夫链， (8.1.20) 
齐次马尔可夫链，（附录 .7) 
满射， （1.2.15) 

幂等性 


矩 


二项矩， (2.8.53, 附录 .3) 
阶乘矩， (2.8.49, 附录 .3) 
n 阶阶乘矩，（附录 .3) 


距离 


柯尔莫戈洛夫距离， (3.7.6) 
莱维距离， (3.1.4) 

瓦塞尔斯坦距离， (3.13.7) 


n 与 u 运算的幂等性， （1.1.1) 


模型 


波利亚模型， (1.2.28) 

高尔顿-沃森模型， （8.5.18) 

取胜概率随机的伯努利模型， (2.8.74) 
一维伊金格模型， （1.2.20) 

自回归模型，（6.1.10, 6.4.3) 


K 


X 2 相合性准则， (1-7.5) 

卡泊林格不等式， (3.9.14) 

卡泊林格时， （3.9.15) 

卡泊林格性质， (3.13.7) 

柯尔莫戈洛夫意义下的稳定性， (3.3.13) 
可缝补， (7.13.6) 

可交换事件组， (2.1.11) 

可交换随机变量序列， （7.1.21) 

克罗内克符号， (1.2.8) 

空间 


母函数 


数列的母函数，（附录 .3) 

随机变量的母函数，（2.6.28,附录 .3) 
指数型母函数，（附录 


N 


逆鞅， (7.1.5, 7.1.21) 


波利希空间， (2.2.8) 
可测空间，（附录 .2) 


o 


欧拉常数， (1.2.32) 


L 


P 


拉德马赫-梅尼绍夫不等式， （7.3.23) 
拉丁方， （1.2.27) 

拉普拉斯算子，（附录 .7) 

离散的电报信号， (1.9.6) 

黎曼 C 函数， (2.3.24) 


帕雷托分布 

离散的帕雷托分布， (2.8.85) 
连续的帕雷托分布， （3.6.23) 
帕塞瓦尔等式, (2.12.29) 

帕斯卡三角形， （1.2.2) 

平衡条件， （8. L 20) 


律 


大数定律， (3.3.2, 43.19) 

柯尔莫戈洛夫大数定律， (3.3.13) 

柯尔莫戈洛夫强大数定律， （4.3.11) 
马钦凯维奇-济格蒙德强大数定律， 

(4.3.2) 


Q 


强大数定律 
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双射， (1.2.15) 

斯科罗霍德勘入， (3.8.7) 
似然比， （1.11.8) 


柯尔莫戈洛夫强大数定律， (4.3.11) 
马钦凯维奇-济格蒙德强大数 

定律， （4.3.2) 

切萨罗意义下的极限， (8.5.6) 

群性质， (8.1.14) 


算子 


马尔可夫链的生成算子 5 (附录 .7) 
移步算子，（附录 .7) 

转移算子， (1.12.3, 附录_7) 

随机变量，（附录 .2) 

对数正态随机变量， (2.8.67) 

广义随机变量， (2.7.45) 

几乎不变的随机变量， （5.1.9) 

可交换的随机变量， (7.1.21) 

奇异随机变量， (2.8.78) 

双向泊松随机变量， (3.6,21) 

随机变量的等价性， （2.10.3) 

随机变量组序列， (3.6.22) 

极限无穷小随机变量组序列， (3.6.22) 
渐近无穷小随机变量组序列， (3-6.22) 
随机过程，（附录 .2) 

离散时间的随机过程，（附录 .2) 

随机过程的有限维分布，（附录 .2) 

随机过程的有限维分布函数，（附录 .2) 

随机向量,（附录 .2) 

随机向量族的稠密性， （3.2.6) 

随机序列，（附录 .2) 

随机游动的变程， （1.9.7) 

随机元，（附录. 2 ) 


R 


罗宾斯-蒙罗程序， (7.4.9) 


S 


a - 代数 


a - 代数的完备化， (2.2.34) 
可分 o ■-代数， (2.2.12) 

可数生成的 a - 代数， （2.2.12) 


熵， (1-8.7) 


条件熵， (1.8.9) 


示性函数 


集合的示性函数，<附录 .2) 


收敛 


概率为1地收敛， (4,2.1) 

基本收敛， （3 丄 1) 

几乎必然收敛， (4.2.1) 

几乎一致收敛， (2.10.38) 

依概率收敛， (2.6.17) 

有限维分布意义下的收敛， (3.1.3) 


数 


贝尔数，（附录 .1) 

伯努利数，（附录 .3) 

调和数， (1,2.32) 

斐波那契数， （1.2.11) 

卡塔兰数， (1.1.4) 

欧拉数，（附录 .3) 

排列数，（附录 .1) 

斯特林数 

斯特林数的二重性， (1.2.8) 
二阶斯特林数，（附录 .1) 

一 阶斯特林数，（附录 .3) 

组合数，（附录 .1) 

数学期望，（附录 . 3) 

广义数学期望， （3.3.15 注） 


T 


调和数， (1.2.32) 
特征函数，（附录 .3) 


条件 


(1+ S ) 条件， （3.3.16) 
k 阶林德伯格条件， (3,4.11) 
诺维可夫条件， (7.7.8( b )) 
强混合条件， （6.3.5) 

条件熵， （1.8.9) 

统 it * 


奥米咖平方统计量， （3,13.5) 
玻色-爱因斯坦统计量， (1.1.21) 
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麦克斯韦禮尔査诺统计量， (1.1.19) 
顺序统计量，（1.12.8, 2.8.19) 

秩序统计量， (1.12.8) 


信息量， (1,8.10) 


Y 


样本 


W 


无序样本，（附录 .10 
有序样本，（附录 .1) 
样本方差， （2.8.20) 

样本均值， （2.8.20) 


位势 


函数的位势，（附录. 7 ) 

马尔可夫链的位势，（附录 .7) 
算子的位势，（附录 .7) 

鞅论中的位势， (7.1.25) 
位势- 测度，（附录 .7) 


引理 


博雷尔-坎泰利引理，（附录 .3) 

博雷尔-坎泰利第二引理， (2.10.17) 

博雷尔-坎泰利第一引理, (2.10.16) 
法图引理， (2.6.39) 

关于集合的法图引理， （2,1.15) 

关于条件数学期望的法图引理， 
(2.7.15) 

赫利-布雷引理， (3.1.11) 

帕雷托引理， (2.6.19) 

施佩纳引理, (2.2.2 B ) 

斯鲁斯基引理， (2.10.5) 

谢费引理， (2.10.56) 


问题 


狄利克雷问题，（附录 .7) 

关于泊松方程的狄利克雷问题, (8.8.11) 
齐次狄利克雷问题， (8.8.24) 

夫妻邻座问题， (1.2.26) 

会面问题， (2.7.12) 

惠更斯问题， (2.1.30) 

无序问题， (1.1.16) 

重合问题， (1.1.17) 

无记 忆性, (2.7.45) 

无穷可分分布特征函数的柯尔莫戈洛 

夫表达式， (3.6.15) 


映射 


保测映射，（附录 .4) 
可测映射，（附录 .4) 


X 


原理 


系耦， (3.8.11 ft ) 


安德烈反射原理， (8.8.8) 

关于布朗运动的反射原理， (2.13.40) 
不变原理， (3.4.7 提示） 

唐斯克尔-普罗霍洛夫不变原理， 
(3.4.15( a )) 

最大值原理， (8.8.21) 

原子， (2.3.35) 

分割的原子，（附录 .1) 


系数 


多布鲁申遍历系数， （3.9.13) 

多项式系数， (1.2.12) 

多项系数， (1-2.12) 

峰度系数， (2.8.81) 

偏度系数， (2.8.81) 

相关系数，（附录 .3) 

置信区间的可靠性系数， (2.13.32( c )) 
最大相关系数， (2.8.5) 

相互独立的事件，（附录 .2) 

协方差，（附录 .3) 

辛钦准则， (3.3.10) 


Z 


再生循环，（附录 .7) 

增广数轴直线， （2.2.23) 

中位数， (1.4.5) 

随机变量的中位数，（1.4.23, 4.2.20) 
最大值不等式， (4.5.13)(7.3.13) 


信息 


费希尔信息， (6.4.4) 

库尔贝克信息， （3.9.3) 



















































